Джерри Алан Уэст является пятым из шести детей. Его мать Сесил Сью Уэст была домохозяйкой, а отец Ховард Стюарт Уэст работал электриком на угольной шахте. Будучи застенчивым, он ещё больше ушёл в себя после того, как его брат Дэвид погиб в Корее в возрасте 22, когда Джерри было 12 лет. Уэст проводил время охотясь, ловя рыбу и играя в баскетбол так часто, что впоследствии НБА назовет «одержимым». По окончании игровой карьеры он сильно увлёкся гольфом и за день проходил до 36 лунок. В 2009 году он стал исполнительным директором Northern Trust Open — одного из турниров PGA.