La costruzione risale al 1170, periodo in cui il castello apparteneva alla famiglia Congost durante la crociata degli Albigesi. Questi signori praticavano il catarismo ed erano visti come eretici.