A.- Né en 1931, C._ a cotisé à l'AVS à partir de l'année 1959, dans un premier temps comme ressortissant français, puis comme algérien. Il est décédé en 1995. Par décision du 29 juillet 1999, notifiée le 23 août 1999 à sa veuve, S._, la Caisse suisse de compensation (la caisse) a remboursé à cette dernière les cotisations que son époux avait versées jusqu'en 1994, soit une somme de 61 516 fr. 35. B.- Sous pli posté le 22 décembre 1999, S._ a recouru contre cette décision devant la Commission fédérale de recours en matière d'AVS/AI pour les personnes résidant à l'étranger, en concluant au versement d'une rente de l'AVS. A ses yeux, la somme restituée par la caisse ne constituait qu'une avance de rente. Par jugement du 5 septembre 2000, la juridiction de recours de première instance a déclaré le recours irrecevable pour cause de tardiveté (ch. 1 du dispositif du jugement attaqué). Elle a par ailleurs renvoyé le dossier à la caisse, afin qu'elle examine si la recourante peut ou non prétendre une rente de vieillesse en raison des cotisations que son époux avait versées à l'AVS avant le 1er août 1962, lorsqu'il était français (ch. 2). C.- S._ interjette un recours de droit administratif contre ce jugement dont elle demande implicitement l'annulation, en concluant derechef au versement d'une rente de vieillesse en sus de la restitution des cotisations.