Faits : A. A._, ressortissant français né en 1950, réside en Suisse depuis le 1 er juin 2004. Il n'y exerce pas d'activité lucrative. A partir du 1 er mars 2010, il a perçu des pensions de retraite de la sécurité sociale française (régime général) et du régime complémentaire professionnel français (notifications de l'Assurance retraite, B._, de la Mutuelle sociale C._ et de la Caisse D._). Par courrier du 25 février 2016, l'intéressé a demandé à l'Office fédéral des assurances sociales (OFAS) à être exempté de l'assujettissement à l'assurance-vieillesse, survivants et invalidité obligatoire (AVS/AI). Par décision du 6 avril 2016, l'OFAS a rejeté la demande et dit que A._ était assuré obligatoirement à l'AVS/AI en qualité de personne n'exerçant aucune activité lucrative jusqu'à la date fixée à l'art. 3 al. 1 LAVS, à charge pour la Caisse de compensation cantonale de déterminer la date du début de l'assujettissement à la législation suisse de sécurité sociale avec précision. B. Par jugement du 1 er novembre 2016, le Tribunal administratif fédéral a rejeté le recours interjeté par l'intéressé contre cette décision. C. A._ interjette un recours en matière de droit public contre ce jugement, dont il demande implicitement l'annulation. En substance, il conclut à ce qu'il soit exempté de l'assujettissement à l'AVS, en demandant que le Tribunal fédéral procède à différentes constatations relatives notamment à l'interprétation du droit communautaire applicable et à l'absence d'équivalence entre les cotisations réclamées et les prestations.