Conquistado por Jaime I en 1233 ha sufrido diferentes reformas a lo largo de su historia, siendo sus vestigidos más antiguos del siglo XIV; momento en que el maestre de la Orden de Montesa obliga a los habitantes de Villafamés a reparar y reforzar las fortificaciones del lugar.