Am 1. Mai 1933 trat Dexel – wie alle Lehrkräfte der Magdeburger Kunstgewerbe- und Handwerksschule – in die NSDAP ein. Dennoch entlässt ihn die Kunstgewerbe- und Handwerkerschule Magdeburg 1935, mit der Begründung er sei ein „Entarteter Künstler“ und ein „unzuverlässiger Nationalsozialist“. 1937 wurden zwei seiner Werke in der Ausstellung „Entartete Kunst“ gezeigt: Das Ölgemälde "Lokomotive" von ca. 1921 und die Hinterglasmalerei "Abstrakte Komposition". Der Verbleib beider Arbeiten ist unbekannt. 1936 bis 1942 war Dexel Professor für Theoretischen Kunst- und Formunterricht an der Staatlichen Hochschule für Kunsterziehung in Berlin-Schöneberg. 1942 wurde Dexel von der Stadt Braunschweig beauftragt, eine Sammlung historischen und modernen Gebrauchsgeräts aus Handwerk und Industrie aufzubauen. Parallel lehrte er an der Braunschweiger „Meisterschule für das gestaltende Handwerk“ (so die NS-Bezeichnung für die spätere Hochschule für Bildende Künste). Dexel knüpfte damit an seine eigene Sammlungs- und Publikationstätigkeit zum Thema „Hausgerät“ an, die 1931 begann. Er arbeitete am neugegründeten Institut für handwerkliche und industrielle Formgebung Braunschweig und veröffentlichte in Zusammenarbeit mit der Ahnenerbe-Stiftung.