Era hermano menor de Artus Gouffier, señor de Boisy, tutor de Francisco I de Francia y fue educado con este participando con él en el asedio de Génova (1507) y en las jornadas de Éperons (1513) siendo uno de los favoritos reales más poderosos tras su coronación.