Trasformato nel XVI secolo in residenza signorile, il castello ospitò i duchi di Bisaccia e persino Torquato Tasso.
Nel 1769, a causa di un incendio, venne via via abbandonato dai nobili feudatari.
Dal 1903 al 1920 ospitò l'antica e nota famiglia Robucci, ultimi proprietari del castello ducale.
Dal 1977 il castello appartiene al comune, che lo utilizza come museo.