Tra il 1583 e il 1713 feudo fu quindi di pertinenza della famiglia dei Marliani, autori di una casa-forte ancor'oggi visibile a Castiglione.
Nel 1593 si registra una visita pastorale da parte del vescovo Feliciano Ninguarda..
Ai Marliani si avvicendarono infine i Riva Andreotti, a cui Castiglione risulta ancora infeudato nel 1751.
La nuova chiesa fu consacrata dal vescovo Giambattista Mugiasca nel 1775."