Fire år senere, under Sommer-OL 1964 i Tokyo, forsvarte han sin olympiske tittel i tårnstup, han vant konkurransen foran italienske Klaus Dibiasi og Thomas Gompf fra USA.