Peter Hitchens ble født på Malta, hvor hans far, sjøoffiser Eric Ernest Hitchens (1909–1987), var stasjonert som en del av den daværende middelhavsflåten til Royal Navy. Hans mor, Yvonne Jean Hitchens (født Hickman; 1921–1973) hadde møtt Eric mens hun tjenestegjorde i Women's Royal Naval Service (Wrens) under andre verdenskrig.