Han er sønn av Albrecht av Bayern og grevinne Maria Drašković von Trakošćan. Han er oldebarn av Bayerns siste konge, Ludwig III av Bayern, som regjerte til 1918.