弟弟阿达尔伯特（1018年起任藩侯）和侄子恩斯特（1055年起任藩侯），恩斯特由于对皇帝康拉德二世和亨利三世的突出忠诚而得到很多赏赐。 恩斯特的继承人利奥波德二世与皇帝亨利四世发生争吵。亨利四世企图剥夺利奥波德的领地，后来又打算剥夺利奥波德的儿子利奥波德三世的继承权，但均未成功（利奥波德三世于1096年接任藩侯）。利奥波德三世支持皇帝之子亨利反对自己的父亲，但后来又倒向亨利四世一边，并于1106年娶了亨利四世的女儿，士瓦本公爵腓特烈一世的遗孀阿格尼丝。他在1125年亨利五世死后拒绝了神圣罗马帝国的皇位（