Ya de niño, se rodeó de compañías que conservarían su influencia hasta su vida adulta, tales como Ana de Montmorency (1492-1567), Martin de Montchenu, Felipe de Brion y Roberto de La Mark, señor de Fleuranges.