Fue el quinto e último hijo, único varón, del granjero Henry Clay Goddard y su mujer Sarah Winslow Goddard, que eran devotos cuáqueros.