Passman studerte ved University of Michigan. Der tok han en bachelorgrad i flyingeniørvesen, og i 1946 nok en bachelorgrad i matematikk. I 1947 fikk han mastergradseksamen som flyingeniør.