Am 25. November 1705 heiratete er in Anrath Eleonore Magdalena Wilhelmina (* 6. Februar 1687, † 10. März 1727), Tochter des Grafen Ernst Wilhelm Graf von Bentheim-Tecklenburg-Steinfurt. Diese Heirat ebnete ihm den Weg in den europäischen Hochadel. Anlässlich der tapferen Verdienste seines Onkels Damian Hugo im Türkenkrieg wurde neben diesem auch Ambrosius Franz am 8. September 1706 von Kaiser Joseph I. in den Reichsgrafenstand erhoben. Sein Familienname wurde dabei, dem Modegeschmack der Zeit folgend, ins französifizierte „von Virmont“ geändert.