Opprinnelig var han medlem av De Nationalliberale, men i 1860 var han med på å stifte utbryterpartiet De Uafhængige, og fra ca. 1865 tilhørte han gruppen «nationale godsejere» med Christian Emil Krag-Juel-Vind-Frijs og Jacob Brønnum Scavenius Estrup som de ledende. Da han i 1872 avskaffet «fæstevæsenet», medførte det at han skaffet seg fiender blant godseierne, noe som senere kom til å felle hans regjering.