En normannisk middelalderkronikør hevdet at Robert reiste til Normandie i 1051 eller 1052 og fortalte hertug Vilhelm, den framtidige Vilhelm Erobreren, at Edvard ønsket at Vilhelm skulle bli hans arving (da den engelske kongen var barnløs). Den nøyaktige tidsberegningen for Roberts reise, og om han faktisk noen gang gjorde den, har vært emne for stor debatt mellom historikerne. Erkebiskopen døde i eksil ved Jumièges en gang mellom 1052 og 1055. Robert fikk satt i gang betydelige bygningsarbeid ved Jumièges og var antagelig den første som involverte romansk arkitektur i England med kirken bygd i Westminster for Edvard Bekjenneren, i dag kjent som Westminster Abbey. Robert av Jumièges’ behandling av de engelske ble benyttet som en av flere grunner av Vilhelm Erobreren for å rettferdiggjøre hans invasjon av England i 1066.