Han var medlem av Landstinget fra 1943 til avskaffelsen av tokammersystemet ved grunnlovsendringen i 1953, deretter medlem av Folketinget for Holbæk amtskrets fra 1953 til 1957 og for Vestre storkrets i København fra 1960 til 1964. Han var formann i hovedstyret for Det Konservative Folkeparti fra 1957 til 1965. Foss var en viktig økonomisk bidragsyter, og sørget især for å finansiere små konservative aviser i Danmark.