Razumovskij ble født i en familie av registrerte kosakker tilknyttet Kiev-regimentimentet. Hans adelsbakgrunn er uklar, forskjellige biogafer har hver sine beskrivelser av hvor dette kom fra.