悉尼奥运会是杨威体操生涯的第一个高峰，20岁的他技术已经开始成熟，也积累了一些参加国际比赛的经验。中国体操男队在1992年和1996年两次夺得奥运会团体银牌后，再度向金牌发起了冲击。由参加上届世锦赛的四员大将——李小鹏、邢傲伟、杨威和黄旭，带着两位新人肖俊峰和郑李辉上阵。中国队实现历史性突破，首次获得奥运会男子体操团体冠军。在最考验运动员综合实力的男子体操个人全能项目上，杨威则向俄罗斯体操名将阿列克谢·涅莫夫发起了挑战。决赛中两人比分一直咬得很紧，最终涅莫夫笑到了最后，杨威以0.113分的微弱差距获得了银牌