Han ble i førstningen etterfulgt av sin eldre tante, Beatrice de Say, pikenavn Mandeville, som ga sitt krav på tittelen videre til hennes overlevende sønn Geoffrey de Say. Denne inngikk avtale om å betale en særdeles stor sum for å arve Mandeville-besittelsene, men han falt raskt i skyld og uten å være i stand til å betale. Geoffrey Fitz Peter, ektefelle av Beatrices barnebarn, og med samme navn, Beatrice de Say, var en framstående mann ved hoffet og benyttet sin posisjon for å presse fram sin hustrus krav. Hun av den eldste datteren til Geoffrey de Says eldste bror. Til slutt gikk besittelsene, og senere også tittelen til Geoffrey Fitz Peter ved sin hustrus rett.