Whitman var den eldste av to brødre. Foreldrene var Cecilia (født Gold) og Joseph Whitman. Etter at han ble uteksaminert fra videregående tilbrakte han tre år ved U.S. Army Corps of Engineers. Etter å ha forlatt militæret, skrev han seg inn hos Los Angeles Academy of Dramatic Art for å studere teater og skuespill.