En el siglo XVII fue vendida al conde de Cañete quien derribó parte del castillo para construir su palacio.