Der Höhepunkt seiner Karriere war der Gewinn der Goldmedaille im Eiskunstlauf der Herren bei den Olympischen Spielen 1964 in Innsbruck. Der Olympiasieg Manfred Schnelldorfers war überraschend. Eigentlicher Favorit war Alain Calmat aus Frankreich, der von 1962 bis 1964 Europameister und auch Vize-Weltmeister 1963 war. Schnelldorfer ist bis heute der einzige deutsche Olympiasieger im Eiskunstlauf der Herren.