De regreso a Londres, creció con sus dos hermanos mayores Philip Peveril y Ernest Armine prácticamente como un huérfano hasta los quince años, ya que sus padres seguían residiendo en Hong Kong, bajo distintas tutelas familiares.