Протягом альбігойських воєн замок значно постраждав від рук хрестоносців. У вересні 1214 року, під час катарського хрестового походу воєначальник хрестоносців, Симон де Монфор, звинуватив володарів замку Бенак в катарській єресі, з метою захопити замок, який мав важливе стратегічне значення на цій прикордонній території. Хоча де Бенак і не виказував ніякого спротиву, оголосивши себе вірним васалом короля Франції, Симон де Монфор зруйнував донжон замку та цитадельні стіни. Проте, за рік де Бенак спромігся повернути собі замок, а всі люди Монфора, які там перебували в той час, були знищені.