Tras el divorcio de sus padres en 1956, él y su hermano Benjamin (1953), crecieron en Princeton, Nueva Jersey, a cargo de su madre, quien se volvió a casar unos años después y le dio otros dos hermanos, Jeff y Kevin.