ディルク・デ・グラーフ・ファン・ポルスブルック
ポルスブルックは、1833年8月28日に、オランダの貴族であるデ・グラーフ家の一員として生まれた。父はツイト=ポルスブルック、プーマランドおよびイルペンダム伯ゲリット・デ・グラーフ・ファン・ポルスブルック4世(Gerrit de Graeff (IV) van Zuid-Polsbroek, heer van Zuid-Polsbroek, en Purmerland en Ilpendam)、母はカロリーナ・ウルスリナ・ステファニア・エンゲルス(Carolina Ursulina Stephania Engels)である。日本滞在中に、女中として同居していた小山おちょうとの間に長男ピーテル(1861年6月8日-1914年8月7日)をもうけている。1872年にボンネ・エリザベート・ロイエル(Bonne Elisabeth Royer)と結婚。5人の子供をもうけるが、そのうちの一人は後に駐日オランダ大使、オランダ領東インド総督、オランダ外務大臣を歴任したアンドリース・コルネリス・ディルク・デ・グラーフ(Andries Cornelis Dirk de Graeff、1872年8月7日 – 1957年4月24日)である。
本名はディルク・デ・グラーフであるが、1853年に東インドに赴任した際に「ファン・ポルスブルック」の自称を加えた。おそらく植民地陸軍に勤務していた兄弟と区別するためと思われる。バタヴィアの植民地政府で勤務した後、1857年6月に出島に2等補佐官として赴任した。