En la década de 1480, el castillo estaba en manos del Duque de Gloucester, el futuro Ricardo III, y fue el que ordenó construir una torre adicional en la muralla norte.