A.- R._, marié, exerçant l'activité d'artisan-ferronnier à titre indépendant, a été victime d'une attaque cérébrale à la fin du mois d'avril 1995, puis d'un infarctus au mois d'octobre 1995. L'Office de l'assurance-invalidité du canton de Fribourg a mis le prénommé, alors domicilié dans le canton de Fribourg, au bénéfice d'une rente entière d'invalidité, assortie d'une rente complémentaire en faveur de son épouse dès le 1er octobre 1996. Après le divorce de R._, son établissement dans le canton de Vaud et son remariage le 24 avril 1998, l'Office cantonal de l'assurance-invalidité du canton de Vaud (ci-après : OAI) lui a, par décision du 24 février 1999, alloué une rente entière d'invalidité dès le 1er avril 1998. B.- Le prénommé a recouru contre cette cette décision au motif que l'OAI lui a refusé l'octroi d'une rente complémentaire en faveur de son épouse; il a été débouté par jugement du 22 février 2001 du Président du Tribunal cantonal des assurances du canton de Vaud. C.- R._ interjette recours de droit administratif contre ce jugement dont il requiert implicitement l'annulation, en concluant à l'octroi d'une rente complémentaire pour son épouse. L'OAI conclut au rejet du recours. L'Office fédéral des assurances sociales conclut au renvoi de la cause à l'administration pour complément d'enquête ou du moins à ce que le dossier AI complet soit produit devant la Cour de céans.