A la muerte de su padre cuando él apenas tenía 7 años se convirtió en conde de Vendôme, durante su minoría de edad sus posesiones fueron administradas por su cuñado Luis de Joyeuse, esposo de su hermana Juana.