Von November 1932 bis November 1941 (in der NS-Zeit nannte er sich nur noch „von Pfeffer“, da „Salomon“ als typisch jüdischer Name verpönt war) war er Reichstagsabgeordneter der NSDAP und gehörte dem „Verbindungsstab des Führers“ in der Reichskanzlei an. Aufgrund parteiinterner Querelen mit Josef Wagner und seiner Bekanntschaft mit Rudolf Heß, der sich nach England abgesetzt hatte, fiel er in Ungnade. Er wurde auf Veranlassung Hitlers am 24. November 1941 aus der Partei ausgeschlossen. Nach dem Attentat auf Hitler am 20. Juli 1944 wurde er kurzzeitig inhaftiert.