I løpet av hans tid som greve i Anjou slo Geoffrey ned tre opprør som baronene stod bak, i 1129, 1135 og 1145–1151. Han var ofte i strid med sin yngre bror Elias, som han holdt fengslet til 1151. Trusselen om opprør hjemme førte til at fremgangen i Normandie ble sakket ned, og til at han ikke kunne avse styrker til å intervenere i England. I 1153 ble problemet i England løst gjennom Wallingford-traktaten, som fastlo at Stefan skulle være konge inntil sin død, og at Mauds og Geoffreys sønn Henry skulle etterfølge ham som Henrik II.