Con su primera esposa tuvo un hijo, Daniel, y con su segunda, la escritora Siri Hustvedt, una hija, la actriz Sophie Auster.