Han tjenestegjorde for tronen i seksti år, også for Vilhelms sønn hertug Robert Curthose, og sistnevnte tok han sammen med flere andre adelige parti med i hertug Roberts første opprør mot Vilhelm Erobreren. For dette ble han utvist og hans eiendommer ble konfiskert av kongen. Gjennom venner fikk han etterhvert nåde og sine eiendommer tilbake.