父はジョン・d・ホイットフィールド、母はファニー・デイヴィスで、いずれも1600年代にイングランドから移住した移民の子孫である。