Dunker gikk på Den kongelige tegneskole i 1910-11 og studerte 1911-14 ved i Dresden. Etter eksamen der foretok han en rekke studiereiser og arbeidet som assistent ved flere arkitektkontorer i Kristiania: Morgenstierne & Eide, Arnstein Arneberg og Harald Hals. I 1919 etablerte han egen arkitektpraksis. Allerede samme år fikk han gjennombrudd med førstepremie i en arkitektkonkurranse om bygg til Det Nye Teater sammen med Gudolf Blakstad.