Körners familie stammet fra Kratzau i Böhmen, der han vokste opp sammen med sine søsken Rosa og Richard. Han var i slekt med dikteren Theodor Körner. Hans far var k.u.k. , og var ved guttens fødsel stasjonert i Komorn.