贵族巨头要求他为战败负责，而将其权力剥夺（他在1401年还被贵族软禁了几个月）。这使他耗费十数年，才在匈牙利重建权势。鄂图曼对匈牙利的威胁，因为1402年「跛子」帖木儿大胜鄂图曼而暂时消失。1403年，西吉斯蒙德扑灭了匈牙利贵族中，支持前王之子——拉迪斯劳（那不勒斯国王）的势力，拉迪斯劳虽然率兵登陆匈牙利西侧的达尔马提亚，以争取匈牙利王位，但是他行动过于迟缓，西吉斯蒙德很快就镇压下反叛的贵族，让拉迪斯劳悻悻而归。这件事也成为西吉斯蒙德将王权从谷底中振作的契机（他在1404年颁布法令，大幅削弱教宗对匈牙利