Era hijo del condestable Anne de Montmorency y de Magdalena de Saboya.