Construido en el siglo XI, los templarios se encargaron de ampliarlo, añadiendo entre otras dependencias la de la capilla.