В 2005 году он третий раз стал чемпионом мира, а после неудачного выступления на чемпионате мира в 2006 году в Гуанчжоу взял длительную паузу в выступлениях. Вернувшись на ковёр в 2008 году, Армен Назарян выиграл серебряную медаль чемпионата Европы в Тампере и получил таким образом право участвовать в Олимпийских играх в Пекине. В начале олимпийского турнира уже в первой схватке он победил действующего чемпиона мира Давида Бединадзе, но в дальнейшем не смог завоевать медаль. После этого принял решение завершить свою спортивную карьеру. Относительно неудачные выступления в конце карьеры и необходимость её завершения Армен Назарян объяснял не столько неизбежным в его возрасте ухудшением физических кондиций, сколько психологической усталостью, которая возникала при необходимости выходить на несколько поединков, проводимых в коротком временном интервале.