Quando nel 1382 arrivarono i conti Serego, fu trasformato in centro agricolo dove confluivano i raccolti delle campagne intorno.
Qui venivano ospitati nobili e signorotti che andavano a caccia con il falcone o trascorrevano il tempo libero tra libagioni e piatti succulenti .
Qui fu accolto con grandi onorificenze l'imperatore Carlo V, fra il 4 – 5 novembre 1532, mentre era in viaggio presso Mantova-Bologna per incontrare il Papa.
Nel XVI secolo la corte subì una trasformazione con la costruzione delle barchesse, su disegno di Andrea Palladio, a cui viene attribuito anche la costruzione della “Botte Zerpana”, un manufatto in cotto per far passare la fossa Sarega sotto l'alveo dell'Alpone.