中的同伴瘸子洛泰尔（Lothair the Lame）去世，卡洛曼接任了他的圣日耳曼修道院院长职位。次年的866年，他的另一个哥哥孩童查理（Charles the Child，父亲秃头查理让他成为）去世。在这两位哥哥去世后，卡洛曼成为了秃头查理的长子口吃者路易（Louis the Stammerer）之后的王位第二顺位继承人。由于对早年被赶进教堂的不满，或许也是其内心渴望成为战士，卡洛曼于870年召集了一批贵族追随者。这些支持卡洛曼的贵族没有具体姓名记录，尽管他们中的大多数来自洛泰尔王国和佛兰德伯国。卡洛曼