Fue el tercero de once hermanos, la mayoría de los cuales fueron soldados y algunos de ellos destacados: Jacques Le Moyne de Sainte-Hélène, condujo tropas en las guerras franco-indias; Charles le Moyne de Longueuil, barón de Longueuil, fue gobernador de Montreal; y Jean-Baptiste Le Moyne de Bienville, fundó la ciudad de Nueva Orleans, en Luisiana, hoy Estados Unidos de América.