Player wurde als drittes von drei Kindern geboren. Sein Vater Harry arbeitete als Captain in einer Goldmine. Als Gary Player acht Jahre alt war, starb seine Mutter Muriel an Krebs. Erst im Alter von 14 Jahren begann er Golf zu spielen. 1953 wurde er, noch 17-jährig, Berufsgolfer. Im Januar 1957 heiratete er Vivienne, mit der er sechs Kinder hat. Player hat über viele Jahre die Apartheid in Südafrika verteidigt, sich aber später von seiner früheren Haltung distanziert. Als er am 7. Januar 2021, einen Tag nach dem Sturm auf das Kapitol in Washington, aus den Händen von US-Präsident Donald Trump die Presidential Medal of Freedom entgegennahm, wurde er unter anderem von seinem ältesten Sohn Marc dafür öffentlich kritisiert.