Szilvási ble olympisk mester i bryting under Sommer-OL 1952 i Helsingfors. Han vant den fjerde tyngste vektklassen, weltervekt opp til 73,0 kg, i gresk-romersk stil. I finalen beseiret han Gösta Andersson fra Ungarn.