Nach der „Machtergreifung“ der NSDAP und der Zerschlagung der Gewerkschaften wurde Braye im August 1933 erwerbslos. Er schlug sich in den Folgejahren mit verschiedenen Tätigkeiten durch, u. a. als Lagerverwalter. Infolge der „Aktion Gewitter“ nach dem gescheiterten Hitler-Attentat am 20. Juli 1944 wurde Braye verhaftet und in den Konzentrationslagern Natzweiler und Dachau (vom 4. September 1944 bis 24. September 1944) inhaftiert.