In januari 1236 huwde de nicht van Peter, Eleonora van Provence, met koning Hendrik III van Engeland. Op 20 april 1240 kreeg Peter van Hendrik de titel van baron van Richmond, waarna hij op het einde van dat jaar door Hendrik werd uitgenodigd naar Engeland. Op 5 januari 1241 werd Peter tot ridder geslagen en vanaf dan werd hij bekend als Earl van Richmond, hoewel Peter deze titel nooit officieel kreeg toegekend. In februari 1246 verwierf hij land tussen het Strand en de Thames, waar hij in 1263 het kasteel van Savoye liet bouwen, dat in 1381 tijdens de Engelse Boerenopstand werd vernietigd. Na zijn dood ging Richmond naar zijn nicht Eleonora, die het teruggaf aan de Britse kroon.