Han ble sendt i krigen som soldat i 1943, og ble året etter stygt skadet og fikk en lammelse i den ene hoften. Han greide imidlertid å trene seg opp igjen, og fortsatte med skihopping da krigen var slutt. Sammen med Sepp Weiler og Heini Klopfer tok han initiativet til å få bygd skiflygingsbakken i Oberstdorf, som ble bygd i 1949 og åpnet i 1950. Brutscher, Weiler og Klopfer ble kjent som «Oberstdorf-trioen» i skihopping, en trio som etter hvert ble utvidet til en kvartett da den noe yngre Max Bolkart kom med.