Las almenas escalonadas sugieren algún tipo de ocupación durante el siglo XV, pero en 1583, cuando fue ocupado brevemente por protestantes neerlandeses fue descrito como "el viejo castillo totalmente expoliado".