Als eines von fünf Mitgliedern der Gaukommission des Reichskartells der bildenden Künste im Gau Düsseldorf beteiligte sich Sommer auch als Funktionär an der Gleichschaltung der Zivilgesellschaft im Nationalsozialismus. Die Kommission kontrollierte die Erteilung für die künstlerische Tätigkeit nun notwendiger Lizenzkarten. Wer aufgrund seiner Abstammung keinen Ariernachweis erlangen konnte, oder wessen Kunst die Kommission als „entartet“ einstufte konnte nicht mehr künstlerisch arbeiten. Weitere Verfolgung, bis hin zur Ermordung im Holocaust, schloss sich an. Den Zenith seiner Macht erreichte Sommer ab 1937 als Mitkurator der Großen Deutschen Kunstausstellung und ihrem Gegenstück, der Ausstellung Entartete Kunst.