Después del estallido de la Guerra, su popularidad decayó drásticamente a causa de sus buenas relaciones con el simpatizante nazi Fritz Clausen y con el "Reichsbevollmaechtige" (plenipotenciario del "Reich") Werner Best, que recomendó cálidamente a Vaernet a las autoridades nazis del propio país.