Während seines Studiums der Philosophie wurde er 1820 wie sein Bruder Karl Philipp Borromäus zu Schwarzenberg Mitglied der "Alten Leipziger Burschenschaft". Der jüngste Sohn des Siegers von Leipzig 1813, des Feldmarschalls Karl Fürst Schwarzenberg, trat 1821 als Kadett in die k.k. Armee ein und durchlief in rascher Folge die Ober- und Stabsoffizierslaufbahn. 1836 wurde er Oberst und Kommandant des Kürassierregiments Nr. 4 und 1844 als Generalmajor dem Hofkriegsrat zugeteilt. Das Revolutionsjahr 1848 sah ihn als Brigadekommandant unter dem Kommando Radetzkys in Italien, wo er sich bei etlichen Gefechten auszeichnen konnte. Im Kampf um Mailand erwarb er sich bei Vigentin am 4. August 1848 den Maria Theresia-Orden.