I 1951 ønsket de å involvere ham i den politiske skuesprosessen mot erkebiskop József Grősz av Kalocsa; han ville ikke, og dermed ble han satt i husarrest. På 1950-tallet ble hans mest betrodde kolleger - inkludert hans hjelpebiskop - ofte utestengt fra hovedstaden av politiet, og brevene hans ble sensurert. Slik ble biskopen mer og mer isolert. Lajos Shvoy sto alltid konsekvent på József Mindszentys side; både Vatikanets diplomater og de statlige organer betraktet ham som en biskop som konsekvent var motstander av det kommunistiske system.