Alla metà del Settecento, grazie ad un lascito di 125.000 lire genovesi della nobildonna Anna Maria Pallavicini fu costruita una nuova imponente struttura. I lavori per il nuovo edificio iniziarono nel 1758 e furono completati nel 1766. Il progetto fu affidato all'architetto Andrea Orsolino, noto soprattutto per questa realizzazione. A lui si deve il disegno del portico colonnato che circonda il vasto cortile interno, che oggi, inglobato nel moderno palazzo di giustizia, è quanto rimane del grande edificio.