De kjøpte etterhvert et seks-rom hus i Buffalo, New York. I forhold til hennes barndom var det ren luksus for henne. Hun dyrket en stor blomsterhage, men mesteparten av tiden hennes brukte hun på å lese. Ektemannen ble først valgt inn i kongressen i 1833. I 1847 ble han valgt til statsrevisor i New York State og familien flyttet midlertidig til Albany, New York; deres barn dro på kostskole.