Armfeltin vanhemmat olivat vapaaherra, kenraalimajuri Magnus Wilhelm Armfelt ja Maria Catharina Wennerstedt ja puoliso vuodesta 1796 Johanna Fredrika Lovisa Taube (k. 1846). Diplomaatti, jalkaväenkenraali Gustaf Mauritz Armfelt oli August Filip Armfeltin veli. Armfelt oli henkirakuunarykmentissä kersantti 1776 ja kornetti 1778. Hän opiskeli tämän jälkeen sotakouluissa Karlskronassa ja Braunschweigissa, palaten Ruotsiin 1785. Luutnantiksi henkirakuunarykmentissä Armfelt tuli 1787, kapteeniksi ja kuninkaan aliadjutantiksi 1787 ja yliadjutantiksi 1790. Majuriksi hän yleni samana vuonna ja palveli vuodesta 1791 majurina Turun läänin rykmentissä. Everstiluutnantti ja sivustan kenraaliadjutantti hänestä tuli 1792. Sotapalveluksesta Armfelt erosi lopullisesti toukokuussa 1795. Venäjän keisarin hovissa hänestä tuli vielä todellinen kamariherra 1818. Armfelt omisti Wiurilan kartanon Halikossa. Hän oli edustaja aatelissäädyssä Porvoon valtiopäivillä 1809.