家庭.查理·罗贝尔结过3次婚。他的第一个妻子是比托姆公爵卡西米尔的女儿玛丽亚，她生了一个女儿卡特琳。玛丽亚死于1317年。第二个妻子贝亚特丽斯是神圣罗马帝国皇帝亨利七世的女儿，于1319年死于难产。查理的第三个妻子是波兰国王瓦迪斯瓦夫一世的女儿伊丽莎白，她为他生了5个孩子：