Tras la derrota de Muret en 1213, el obispo cátaro de Tolosa, Guilhabert de Castres, se refugió en el castillo.