På 1950- og 60-tallet ble han også kjent som musiker med sin Toni Brutscher Trio, der han spilte trekkspill sammen med Toni Gruber (gitar) og Ottomäx Titscher (kontrabass). Trioen ga ut flere singler, samt LP-en . I 1952 ble han av president Theodor Heuss tildelt Tysklands høyeste utmerkelse innen idrett, Silbernes Lorbeerblatt (Sølv-laurbærbladet).