944年10月，德军占领匈牙利，他和家人被盖世太保抓获，拘于萨克森豪森集中营。1945年被转移到达豪集中营，在那里被美军释放。二战后，阿尔布雷希特重建了施塔恩贝格湖畔的贝尔格城堡（"Schloß Berg"）并居住在这里。1955年8月2日，父亲鲁普雷希特去世，他成为巴伐利亚王室首领，称巴伐利亚公爵。在妻子玛利亚·德拉什科维奇·冯·特拉科什干于1969年去世后，阿尔布雷希特于1971年续娶了克格列维奇·冯·布津伯爵（"Graf Keglevich von Buzin"）施特凡与妻子克拉拉（"Clara