Fehérváry zmuszony został do działania w podziemiu i do podjęcia pracy jako robotnik w odlewni żelaza. Utrzymywał jednak kontakty z Kościołami starokatolickimi w Polsce. Podczas odwilży politycznej w 1956, na krótko zdołał ponownie zalegalizować Kościół Starokatolicki na Węgrzech, jednak po upadku powstania węgierskiego za sympatyzowanie z rządem Imre Nagya został aresztowany i trafił na kilka lat do więzienia.