Ai XIX Giochi olimpici invernali di , suo congedo olimpico, nella gara di supergigante chiuse 3º dietro al norvegese Kjetil André Aamodt e all'austriaco Stephan Eberharter, conquistando la medaglia di bronzo. Successivamente Schifferer non vinse più altre gare internazionali, pur ottenendo ancora piazzamenti sul podio in Coppa del Mondo (l'ultimo il 6 dicembre 2003 a Beaver Creek in discesa libera, 3º). Si ritirò al termine della stagione 2005-2006 e la sua ultima gara in carriera fu il supergigante di Coppa del Mondo disputato il 16 marzo a Åre, che chiuse al 17º posto.