Peter F. Hjort giftet seg med Tone Seip (1926–2001), og ble dermed svigersønn av språkforsker og rektor Didrik Arup Seip.