Lippmann var født i New York City. Foreldrene var tysk-jødiske Jacob og Daisy Baum Lippmann. Familien hadde ganske bra økonomi, så det var vanlig at familien hvert år reiste til Europa.