Koster ble kjent med kinoens verden rundt 1910, da onkelen hans åpnet en veldig tidlig kino i Berlin. Kosters mor spilte piano som akkompagnement til stumfilmene, og Koster fikk da se filmene som et tidsfordriv. Etter sitt tidlige virke som forfatter ble han ansatt som scenograf for et tysk filmstudio. Da regissøren Koster jobbet for, Kurt Bernhardt, ble syk, måtte han ta over som regissør og han regisserte to-tre filmer for filmselskapet i Berlin rundt årene 1931-1932.