Era nieto de John Breckinridge, un político que había ocupado el cargo de Fiscal General de los Estados Unidos (un cargo que en Estados Unidos es una mezcla de Fiscal General de la República y Ministro de Interior y Justicia) durante una parte del Gobierno del Presidente Thomas Jefferson.