Probablemente durante la dominación musulmana el mesón fue sustituido por un castillo, que debió de ser reforzado a raíz de la conquista aragonesa y dotado de una pequeña iglesia junto a la fortaleza.