Adams trajo a los hijos de su hermano William Smith, su cuñado John Shaw y su hijo Charles a vivir en la Casa del Presidente durante la presidencia de su esposo porque los respectivos padres de los niños estaban luchando contra el alcoholismo.