Gyrth dro sammen med sin eldste bror Svein Godwinson i landflyktighet til Flandern i 1051, men i motsetning til Svein kunne han dra tilbake til England sammen med resten av familien det påfølgende året. Sammen med sine brødre Harald og Toste Godwinson var Gyrth til stede ved sin fars dødsseng den 15. april 1053.