Pocatello, Idaho
Эдвард родился в Покателло, штат Айдахо, 13 мая 1906 года. У него были серьёзные проблемы с дыханием, поэтому около 1915 года его мать, Дженни Уланд Стивенсон, отправилась с ним в Калифорнию, надеясь, что перемена климата улучшит его самочувствие. Позже они вернулись в Айдахо. В декабре 1919 умер его отец, Эндрю Бёртнер Стивенсон. В 1922 году Стивенсон и его мать вновь поселились в Калифорнии.