Faits: A. Par décision du 26 mai 2010, l'Office de l'assurance-invalidité pour le canton de Vaud (ci-après: Office AI) a nié le droit de M._ à une rente d'invalidité. Il a considéré que si l'assuré présentait une capacité de travail nulle dans l'activité habituelle de chauffeur-livreur, il était en revanche apte à exercer une activité adaptée aux limitations fonctionnelles décrites par les médecins du SMR. Le revenu d'invalide était fondé sur le salaire auquel pouvaient prétendre des hommes effectuant une activité simple et répétitive dans le domaine privé (production et services) selon les statistiques salariales (TA1, niveau de qualification 4). Un abattement de 10 % était prévu pour tenir compte des limitations fonctionnelles de l'assuré. Pour l'année 2008 (ouverture du droit à la rente) le revenu d'invalide s'élevait à 55'251 fr. Il résultait de la comparaison avec le revenu sans invalidité de 50'609 fr. que l'assuré ne présentait aucun préjudice économique. B. Par jugement du 16 août 2011, la Cour des assurances sociales du Tribunal cantonal vaudois a rejeté le recours formé par l'assuré contre la décision du 26 mai 2010 de l'Office AI. C. M._ interjette un recours en matière de droit public contre ce jugement dont il demande l'annulation en concluant au renvoi de la cause à la juridiction cantonale dans le sens des considérants.