Armstrong fez uma série de mudanças importantes nas forças armadas, mas estava tão convencido de que os britânicos não iriam atacar Washington D.C. que não fez nada para defender a cidade, mesmo quando ficou claro que este era o objetivo da força de invasão. Após a derrota americana na Batalha de Bladensburg e a subsequente queima de Washington, Madison, geralmente um homem misericordioso, o forçou a renunciar em setembro de 1814.