Mayers eldre bror, Teddy, var en av grunnleggerne av McLaren-teamet. Begge brødrene flyttet fra Amerika til Europa tidlig på 1960-tallet sammen med den fremtidige vinneren av Formel 1-løp Peter Revson.