Peter Nicolay Ræder hører til slekten Ræder. Han er sønn av diplomatparet Gudrun Dorothea Martius (1908–1998) og Johan Georg Alexius Ræder (1905–1981), som blant annet var ambassadør i London. Peter er gift med Inger Melhuus (født 1945).