Razumovsky era hijo de Kiril Razumovski, el último hetman de Ucrania, y sobrino de Alekséi Razumovski, amante de Isabel I de Rusia.