Nå ble imidlertid regjeringen satt under press fra SS. De ønsket seg en enda mer tyskvennlig regjering, og gikk inn for at den ungarske nasjonalsosialist Fidél Pálffy skulle overta. Fra begynnelsen av august trakk den ene minister etter den andre seg fra embedene; Sztójay selv trakk seg tilbake som syk man til et sanatorium.