El castillo fue derribado por el Duque de Benavente en 1394 y posteriormente se construyó en su lugar la puerta de la que hoy solo quedan restos de los muros laterales.