A.- F._, ressortissant français et domicilié en France, a cotisé à l'assurance-vieillesse, survivants et invalidité suisse durant diverses périodes depuis le mois de juin 1972. A partir du 1er octobre 1991, il a été mis au bénéfice d'une rente pour couple de l'assurance-invalidité suisse, remplacée, au décès de son épouse, par une rente simple d'invalidité dès le 1er novembre 1994. Le montant de cette dernière rente (de 1735 fr. en 2001) a été calculé sur la base d'un revenu annuel moyen de 59 784 fr., d'une durée de cotisations suisse de 13 ans et deux mois, en application de l'échelle de rente 39 et en prenant en compte les périodes d'assurance en France. Après que le prénommé eut accompli sa 65ème année, la Caisse suisse de compensation (ci-après : la caisse) lui a alloué, dès le 1er mars 2001, une rente ordinaire de vieillesse d'un montant mensuel de 1296 fr., y compris un complément différentiel, en remplacement de la rente d'invalidité perçue jusque là (décision du 3 juillet 2001). B.- L'assuré a recouru contre cette décision devant la Commission fédérale de recours en matière d'assurancevieillesse, survivants et invalidité pour les personnes résidant à l'étranger (ci-après : la commission), qui l'a débouté par jugement du 15 octobre 2001. C.- F._ interjette recours de droit administratif contre ce jugement, en concluant implicitement à son annulation et à l'allocation d'une rente de 1735 fr., correspondant au montant de la rente d'invalidité qu'il percevait jusque là. La caisse conclut au rejet du recours, tandis que l'Office fédéral des assurances sociales a renoncé à se déterminer.