Rakovskij vokste opp flerspråklig i en velstående familie i Kotel i Øst-Rumelia. I ung alder ble han som revolusjonær utvist fra gymnaset i Grabovo og nektet adgang til offentlige utdannelsesinstitusjoner. Han var da 15 år gammel.