Según algunos biógrafos, la familia desciende de un inmigrante francés hugonote, Pierre Deppe o Dieppe, que se estableció en Virginia aproximadamente en 1700 y se integró en una colonia de refugiados ubicada sobre la cascada del río James.