Albrecht var nogenlunde jevnaldrende med kurfyrst Christian II av Sachsen og hans brødre Johan Georg I og August (1589–1615), og levde som en venn av de tre i palasset i Dresden. En egen liten hoffstat, egne rom i palasset samt tallrike gaver vitner om det nære forhold han hadde til de sachsiske herskerne.