De äldsta dokument som nämner slottet är från 1200-talet då det figurerade i samband med Albigenserkriget. Den som styrde slottet var katarernas ledare Bernard de Casnac som var känd för sin grymhet. Albigenserna intog slottet 1214 genom dess ledare som installerade en garnison, men Bernard återtog slottet och hängde därefter hela garnisonen. Senare fördrevs Bernard från slottet av ärkebiskopen av Bordeaux.