Oskarżony (prawdopodobnie niesłusznie) o przyczynienie się do śmierci Pierre'a de Castelnau stał się celem świętej wojny, jaka rozpętała się w roku 1208. W 1211 został zaatakowany przez krzyżowców z Szymonem z Montfort na czele, któremu papież powierzył dowództwo wojskowe w krucjacie przeciwko albigensom (1209), którzy mieli dominować na ziemiach hrabstwa Tuluzy (Carcassonne, Albi i Béziers). Krucjata przerodziła się w podbój Langwedocji przez feudałów z północy. Walki charakteryzowały się wyjątkowym okrucieństwem i bezwzględnością po obu stronach. W samym Béziers zabito kilka tysięcy mieszkańców.