Hitler hevdet selv at han meldte seg ut av partiet i juli 1921, for å bremse for «villmennene» som ville overta. I et sekssiders brev til partiledelsen forklarte han hvorfor han ikke kunne fortsette, men dette var rent spill fra hans side, da han godt visste at hans talegaver var uunnværlige for NSDAP. Han hevdet seg å være hevet over politisk strid, men satte likevel seks betingelser for å vende tilbake til NSDAP – den ene var at han ble «formann med diktatorisk makt». Drexler og de andre bøyde av, og Hitler fikk det som han ville. I begynnelsen av 1920-årene økte partiet sin oppslutning. Medlemstallet i januar 1920 var 190. I august 1921 var det 3 300 medlemmer i partiet. Organisasjonen ble styrket, og tiltrakk seg nye medlemmer. Hitlers talegaver, SAs tiltrekningskraft på unge arbeidsledige, og Tysklands økonomiske problemer er noe av grunnen til at organisasjonen vokste. Partiet fikk også grupper utenfor Bayern. Julius Streicher i Nürnberg, Ernst Röhm, Heinrich Himmler og Hermann Göring ble også medlemmer på denne tiden. I desember 1920 startet partiet opp avisen , som kom ut som dagsavis fra 1923, og ble partiets hovedorgan.