Etter at det var etablert et nett over hele det sørlige Norge kom Gestapo våren 1942 på sporet av organisasjonen. Flere i ledelsen måtte flykte til Sverige, blant dem Storsveen som fortsatte å lede organisasjonen fra utlandet. Arvid Storsveen besøkte imidlertid Oslo i april 1943, og ble drept i en Gestapo-felle. Han avslørte imidlertid ikke hvem han var og XU fortsatte under ledelse av Øistein Strømnæs og Anne-Sofie Østvedt. Arvids bror Erik Storsveen ble oppnevnt som ny XU-sjef i Stockholm.