I januar 1940 begynte avlivingen av syke i gasskamre i anstaltene i Brandenburg og Grafeneck. Den 3. april 1940 refererte Brack på Deutsche Gemeindetag: 30 til 40 prosent av de rundt 300.000 sinnssyke i Det tyske rike var «asosiale» eller «livsuverdige» elementer. Disse ble nå flyttet til «primitive underkomster» hvor det var en høyere dødelighet. Brack ba rundt 200 kommunerepresentanter om å innvirke beroligende på befolkningen og forberede seg på å bli tilsendt urner. Til tross for omfattende bestrebelser på å hemmeligholde Aktion T4, sivet det stadig ut rykter: Derfor henvendte Himmler seg den 19. desember 1940 skriftlig til Brack om at den sanne hensikt med dødsanstalten Grafeneck var blitt kjent.