1824年2月19日に、母方の従兄であるヴュルテンベルク王子パウルの娘シャルロッテと結婚した。
1817年7月12日，父亲在第一任妻子哈丽特死后，与哈丽特的堂妹玛丽亚·坡结婚，即弗吉尼亚的母亲。