Det var også dårlig helse som førte til at han gikk av, da han hadde fått et hjerteinfarkt, og måtte legges inn på for en hjertebypassoperasjon i juni samme år. Erkebiskop Yongs siste offentlige medieopptreden var i mai 2004, da Yong ble innkalt som påtalevitne i rettssaken mot den katolske presten Joachim Kang, som ble dømt og fengslet for urettmessig tilegnelse av S$5,1 millioner i kirkelige midler. Til tross for dårlig helse, nedspilte han plagene sine da aktor spurte om han trengte en pause. «Jeg har det bra og kan fortsette,» svarte han, og spurte deretter dommeren om hun også hadde det bra, og utløste latter i den høytidelige rettssalen.