カール・フォン・エスターライヒ (1560-1618)
しかし辺境伯は領民に白ビールの飲酒を禁止したり、所領内に居住する貴族・封建勢力(アウクスブルク司教やフッガー伯爵家、帝国自由都市であるウルムとアウクスブルクの都市貴族層)との間で、課税や領主権の行使をめぐって常に争いを起こしていた。このため嫌われ者の辺境伯の宮廷に出入りする者はわずかだった。1617年、彼はギュンツブルクに住むユダヤ人の追放を決定し、ユダヤ人は1年以内に町を離れるよう通告された。
1616年、ギュンツブルクでカプチン会修道院(Kapuzinerkloster Günzburg)の建設を始めた。カールと妻の遺骸は完成したこの修道院内の教会堂に埋葬された。1806年に世俗化に伴って同修道院が解体された際、辺境伯夫妻の亡骸は同市内のマルティン教会(Sankt-Martins-Kirche)に改葬された。
1601年3月4日、ユーリヒ=クレーフェ=ベルク公ヴィルヘルム5世の娘で従姉にあたるジビュレ(1557年 - 1627年)と結婚したが、夫婦ともに40歳を過ぎてからの晩婚だったこともあり、子供は無かった。このため、カールが死ぬと所領は全て本家筋のハプスブルク家領に回収された。
結婚する以前、愛妾との間に2男1女の庶子をもうけていた。2人の息子はホーエンベルク男爵(Freiherr von Hohenberg)を名乗り、男系子孫は1726年まで続いた。