Brack, som kom fra en legefamilie. Faren var lege fra Göttingen, moren volgatysker fra Saratov. Han studerte økonomi i München etter første verdenskrig. Der meldte han seg inn i NSDAP (medlemsnr. 173 388) i 1929.