336年继承父亲为杜拉佐公爵和格拉维纳伯爵。因母亲的扶持，他在堂侄女乔万娜一世的朝廷有很高的政治影响力。1343年4月21日，他在那不勒斯娶了阿尔巴女伯爵卡拉布里亚的玛丽亚。她是的小女儿，乔万娜一世的妹妹，本打算许婚匈牙利国王拉约什一世或法兰西国王让二世，却被卡洛及其母劫持成婚，以让卡洛更接近那不勒斯王位。乔万娜一世的王夫也是拉约什一世的弟弟死于阴谋时，他小心置身事外，作为嫌疑人，他在两次受审后被宣布无罪，并带领一派人反对乔万娜和自己的堂兄。他联络匈牙利朝廷，寻求支持。他希望趁拉约什以为弟报仇为名入