En 1832, la familia —compuesta por Elizabeth, Maria, Virginia, y el hermano de Virginia, Henry— logró, gracias a la pensión de Elizabeth, alquilar una casa en lo que entonces era el número 3 de Amity Street, en Baltimore.