Fue construido a partir de 1240 por los Caballeros Templarios bajo el reinado de San Luis, sirviendo durante muchos años como casa madre de la orden y depósito del Tesoro Real (que se venía conservando en manos templarias en este mismo lugar desde 1146).