Anton var den femte sønnen, og den tredje som overlevde, av kurfyrste Fredrik Christian av Sachsen og Maria Antonia av Bayern.