Sin embargo lo recuperan los almohades en 1196 pasando finalmente de nuevo a los caballeros de Calatrava en 1212, sufriendo diversas modificaciones arquitectónicas.