Tuvo dos hijos con Greenough, Meredith ("Muffy") en 1959 y Peter, Jr.