A.- Par décisions du 6 juillet 2001, l'Office de l'assurance-invalidité du canton de Fribourg a alloué à G._ une demi-rente d'invalidité pour la période du 1er octobre 2000 au 30 novembre 2000, puis à partir du 1er avril 2001. B.- Par écriture du 30 août 2001, l'assuré a recouru devant le Tribunal administratif du canton de Fribourg en concluant au versement d'une demi-rente à partir du 1er oc- tobre 1999 (et non du 1er octobre 2000). Le 15 novembre 2001, l'office de l'assurance-invalidité a écrit au tribunal administratif pour l'informer que, selon un rapport d'expertise du COMAI de Bâle reçu le 11 juin 2001 (daté du 30 mai 2001), la capacité de travail de l'assuré était entière dans une activité ne comportant pas de travaux physiques moyennement lourds à lourds, favorisant la position assise et n'impliquant pas le port répétitif de charges (5 à 10 kg au maximum), la montée ou la descente d'escaliers, ainsi que la marche prolongée. L'office a informé le tribunal de son intention de rendre une décision de suppression de rente. Le 29 novembre 2001, l'office de l'assurance-invalidité a effectivement notifié à l'assuré une décision par laquelle il supprimait la rente en cours avec effet au premier jour du deuxième mois suivant la notification de ladite décision, soit le 1er janvier 2002. L'office a envoyé une copie de sa décision au tribunal. Considérant que cette décision contenait une requête implicite de mesures provisionnelles, le président du tribunal administratif, statuant sur cette requête en la voie incidente, a suspendu avec effet au 1er janvier 2002 le versement des rentes accordées par les décisions du 6 juillet 2001 (décision du 8 avril 2002). C.- G._ interjette un recours de droit administratif en concluant à la réforme de la décision du président du tribunal administratif en ce sens que le versement de la demi-rente soit rétabli "immédiatement avec effet au moment où il a cessé". Il requiert en outre l'effet suspensif à son recours. L'office de l'assurance-invalidité s'en remet à la décision attaquée. Quant à l'OFAS, il ne s'est pas déterminé.