Louisa og John Quincy Adams fikk 3 sønner som vokste opp og ei datter som døde 1 år gammel. I tillegg hadde Louisa Adams flere spontanaborter.