Das Haupt der Primogenitur und des Gesamthauses Goëss war der Sohn von Peter Graf von Goëss (1774–1846) und seiner Gattin aus zweiter Ehe Gräfin Isabella von Thürheim zu Bibrachzell (1784–1855). Er legte die Staatsprüfungen über die zwei ersten Jahre des juristischen Studiums ab, stand 1835 bis 1847 im aktiven Militärdienst, als Rittmeister im 5. Kürassierregiment. Er vermählte sich am 14. Mai 1848 mit Maria Theresia Gräfin von Wilczek (* 23. Mai 1823 in Wien; † 23. Juni 1898 ebenda), Sternkreuzordens- und Palastdame. 1849 machte er als Major den Feldzug gegen das aufständische Ungarn mit.