Nel 1850, dopo la morte della madre a causa di un tumore, decise di ritirarsi dalla vita politica per dedicarsi allo studio della medicina. Acquistò i terreni dove sorgevano le rovine dell'antica rocca di Savignano e il 5 novembre dello stesso anno pose la prima pietra del castello che avrebbe chiamato "Rocchetta", dove si stabilì definitivamente a partire dal 1859.