En 1587, el VII duque, Alonso Pérez de Guzmán el Bueno, añadió a la mencionada torre un pequeño baluarte, aunque, probablemente debido a sus pequeñas dimensiones, más tarde, en 1634, el VIII duque, Manuel Alonso Pérez de Guzmán el Bueno, comenzó la construcción del castillo más al borde de la barranca.