Wegen seiner Verdienste während des Feldzugs in Flandern wurde William 1297 Vormund für den zehnjährigen John de Mowbray. Er verlobte sein Mündel mit seiner sechsjährigen Tochter Alina. Nach dem Tod seines einzigen Sohnes setzte er Alina und ihren Mann als Erben ein. Dennoch versuchte er auch seine Ländereien an den Schwiegervater seiner Tochter Joan, Humphrey de Bohun, 4. Earl of Hereford sowie an Roger Mortimer of Chirk und dessen Neffen Roger Mortimer of Wigmore zu verkaufen, während Hugh le Despenser, der Günstling des Königs, als Baron von Glamorgan Gower für sich selbst gewinnen wollte. Despenser bemühte sich nachzuweisen, dass William keine Rechte mehr an seiner Herrschaft habe. Der König beschlagnahmte daraufhin am 26. Oktober 1320 Gower und ließ es im November besetzten. Dieses Vorgehen war mit ein Anlass für die Rebellion der Marcher Lords, dem sogenannten Despenser War von 1321 bis 1322. Die Rebellion zwang Hugh le Despenser und seinen Vater ins Exil, während John de Mowbray Gower erhielt. Despenser kehrte jedoch mit Billigung des Königs im folgenden Jahr zurück. In der Schlacht bei Boroughbridge am 16. März 1322 konnte sich der König gegen die Barone durchsetzen, Humpfrey de Bohun fiel in der Schlacht, John de Mowbray wurde gefangen genommen und anschließend in York gehängt. William de Braoses Tochter Alina flüchtete per Boot nach Ilfracombe in Devon, doch sie wurde dort gefasst und zusammen mit ihrem Sohn John im Tower von London inhaftiert. William selbst war hoch verschuldet und ein gebrochener Mann, der gegen eine lebenslange Rente seine Ländereien an den König abtrat. Er versuchte vergeblich, die Freiheit für seine Tochter zu erlangen und starb schließlich 1326.