D'Orvilliers was born in Moulins, Allier, but spent most of his childhood in Cayenne, capital of the French colony French Guiana, where his father was governor.
Д’Орвилье родился в Мулен, провинция Алье, но провел большую часть своего детства в Кайенне, столице колонии Французская Гвиана, где его отец был губернатором.