Far til Adam døde da han var 14 år gammel. To år etter farens død forlot Adam hjemmet, for å bo med Conrad i Zwickau. Første gang Adam er nevnt i et offisielt dokument er 22. april 1517, i forbindelse med en arvetvist i Staffelstein.