Nacido en Trois-Rivières, Quebec, Pierre era el hijo menor de René Gaultier de Varennes y Marie, la hija de Pierre Boucher, el primer gobernador de Trois-Rivières.