Som tenåring viste Schwaiger et stort talent som pianist, og han ønsket å gjøre musikken til sitt levebrød. Han tok utdannelse ved musikkonservatoriet i München. I årene etter første verdenskrig var Tyskland preget av økonomisk depresjon, og da det dukket opp en annonse hvor det ble søkt etter en kinopianist i Norge, slo han til. I tillegg til å arbeide som pianist ved Sandefjord kino var han også vikar som organist. Etter hvert ble han også fast inventar i jazzbandet , og han begynte å komponere melodier. Blant dem som satte tekster til hans melodier var revysangeren August Schønemann, og hans mest populære melodi «Hjemløs» ble også spilt inn av den svenske visesangeren Sven-Olof Sandberg og senere (1950) av normannen Arne Sveen med Øivind Berghs Orkester. Utover 1920-årene ble han en populær konsertpianist, komponist og dirigent.