Rossen kom fra en familie der faren arbeidet i FN, og fikk derfor tidlig erfare språk og kulturer i ulike verdensdeler. Selv fullførte han sin sveitsiske artium i Genève. Høsten 1966 kom han til Norge og Universitetet i Oslo. Der ble han cand.mag. (kybernetikk) og tok filologisk hovedfag. Senere arbeidet han en periode som gymnaslærer.