Smith kom fra en familie med skotsk bakgrunn. Da han ble født var landet den britiske kolonien Sør-Rhodesia. (Nord-Rhodesia ble til Zambia). Han studerte ved i Sør-Afrika. Under annen verdenskrig var han flyger i britiske Royal Air Force i Europa og Nord-Afrika. Senere var han stasjonert i Kristiansand rett etter at tyskerne kapitulerte. I 1945 vendte han hjem til sin tobakksfarm i Rhodesia.