De Graeff y su esposa Elisabeth Bicker van Swieten tuvo cuatro hijos: