Sanders ble født i St. Petersburg i Tsar-Russland. Hans foreldre var Henry Peter Ernest Sanders (1868–1960), og Margarethe Jenny Bertha Sanders (født Kolbe; 1883–1967), som var født i St. Petersburg av for det meste tysk, men også av estisk og skotsk slektsbakgrunn. En biografi publisert i 1990 hevdet at Georges far var uekte barn av en russisk adelshvinne tilknyttet tsarens hoff og en prins av huset Oldenburg, gift med en søster av tsaren. Skuespilleren Tom Conway (1904–1967) var George Sanders' eldre bror. Deres yngre søster, Margaret Sanders, ble født i 1912.