子，有一个妹妹波莉娜，常被人称作波莉（）。谢泼德家的祖先可以追溯到乘坐五月花号来到新大陆的清教徒。谢泼德父母家都是当地的望族。他的祖父拥有当地的德里国家银行，老谢泼德年轻时就在这里工作；母亲埃默森家则拥有德里最大的鞋厂。老谢泼德在1915年曾加入国民警卫队，一战期间还曾随美国远征军奔赴法国作战。战后他仍在国民警卫队服役，1940年又应征参加二战，最终晋升为上校。谢泼德小学就读于德里当地的亚当斯学校（），自幼天资聪颖，数学天赋极高，给老师留下深刻印象。他在小学老师建议下跳过六年级，直接升入中学，在德里