La torre fortificata, che fa parte della parete circolare, risale a questo periodo.
Più tardi il castello fu usato come rifugio di caccia e residenza forestale per i Conti d'Olanda.
La più famosa residente fu probabilmente Giacomina di Hainaut ", contessa di Hainaut, che risiedette negli ultimi anni prima della sua morte , avvenuta proprio nel castello, nel 1436.
Johnny Ramone, repubblicano, insistette perché "My Brain Is Hanging Upside Down" fosse il titolo principale e che il termine "Bonzo Goes to Bitburg" che ricollegava al presidente Ronald Reagan ed a una sua discussa visita ad un cimitero di soldati tedeschi a Bitburg, nell'ovest della Germania, fosse scritto fra parentesi.