La mayor parte del castillo fue destruida por las tropas francesas durante la Guerra de la Independencia, conservándose únicamente la hermosa y original torre, obra realizada con una mezcla de los estilos gótico y renacentista, a principios del siglo XVI por el IV y V conde de Benavente, pertenecientes a la Casa Pimentel.