I 1817 ble John Quincy Adams utnevnt til utenriksminister i USA og paret bosatte seg da i Washington D.C.