Während der deutschen Besatzung Polens wurde auch sein jüngerer Bruder, Prinz Ludwik (1877–1941), verhaftet. Zunächst, bei Beginn des Krieges 1939, wurden er und seine Frau Rosa, eine geborene Prinzessin Radziwiłł (1884–1949), vom Innenministerium der UdSSR arrestiert und nach Russland deportiert, wo sie in verschiedenen Gefängnissen inhaftiert waren. Prinz Ludwik und Prinzessin Rosa kamen auf Intervention des königlich-italienischen Hofes frei. Kurze Zeit nach der Rückkehr zu Polen wurde Prinz Ludwik jedoch zusammen mit Fürst Seweryn von der Gestapo verhaftet und im KZ Auschwitz interniert, wo ihm medizinische Behandlung verweigert wurde und er infolgedessen 1941 ums Leben kam, während seine Frau in Polen unter Repressionen der Gestapo, und nach Kriegsende unter dem kommunistischen Regime zu leiden hatte. Nach der Enteignung ihres Besitzes ging sie mit ihren Söhnen, den Prinzen Georg (1907–1977) und Stanisław-Tomasz (1910–1998) nach Belgien, wohin auch ein weiterer Bruder sowie ein Sohn Seweryns emigrierten, und wo sie 1949 verstarb. Auch Ludwiks und Rosas Söhne waren Häftlinge im KZ Auschwitz gewesen, während es ihrer Tochter Maria-Elżbieta (1920–1984) gelungen war, Polen zu verlassen und nach Frankreich zu gehen, wo sie zunächst Medizin studierte, nach der völligen deutschen Besatzung Frankreichs aber nach Großbritannien geflohen war, wo sie den polnischen Piloten Stefan Zantara heiratete. Nach Kriegsende ließ sie sich mit ihrem zweiten Mann, Stefan Graf Rostworowski, in Frankreich nieder.