Jaffé nació de padres judíos en Berlín, Alemania, donde estudió psicología en la Universidad de Hamburgo, antes de huir de los nazis en los años treinta a Suiza.