Klosteret hadde allerede fått land og havn nær Rye, East Sussex av kong Knut, som skulle holde et løfte hans ektefelle Emma av Normandies første mann, Kong Aethelred hadde gitt. Munkene rakk knapt å komme seg på plass før de ble utvist i 1052 av Godwin, Jarl av Wessex. Sønnen Harald Godwinssønn opprettholdt utvisningen, noe som fikk William til å sverge på å gjenerobre landet til munkene. De skaffet ham et skip og hjalp til slik at han ikke glemte løftet etter slaget ved Hastings.