Friedrich Stowasser syntyi köyhään wieniläisperheeseen vuonna 1928. Hänen isänsä kuoli seuraavana vuonna, ja hänet kasvatti hänen juutalainen äitinsä. Äiti laittoi Stowasserin Montessori-kouluun harjoittamaan taiteellista osaamistaan. Kun Itävalta vuonna 1938 oli liitetty Saksaan, äiti lähetti poikansa Hitler-nuoriin, mikä pelasti heidän henkensä toisen maailmansodan aikana.