A.- D._, a bénéficié d'indemnités de chômage notamment durant la période du 1er juin 1998 au 22 avril 1999. Par prononcé du 10 mai 2000, l'Office cantonal genevois de l'assurance-invalidité a constaté que le prénommé présentait une invalidité de 100 % depuis le 23 avril 1998. C 105/01 TnLa demande étant tardive, le début du versement de la rente entière d'invalidité a été fixé au 1er juin 1998. Le 6 juillet 2000, la Caisse cantonale genevoise de chômage (ci-après : la caisse) a demandé à la Caisse fédérale de compensation le versement d'un montant de 20 612 fr. 40 à titre de compensation des indemnités de chômage allouées durant la période du mois de juin 1998 au mois d'avril 1999 inclus. Par décision du 28 juillet 2000, la caisse a réclamé à D._ la restitution d'un montant de 31 932 fr. 90, somme représentant le solde des indemnités de chômage allouées durant la période susmentionnée. En outre, elle attirait l'attention du prénommé sur le fait qu'il avait la faculté de présenter une demande de remise de l'obligation de restituer. L'intéressé ayant recouru contre cette décision, le Groupe réclamations de l'Office cantonal genevois de l'emploi a rejeté le recours par décision du 28 septembre 2000. B.- Par jugement du 23 novembre 2000, la Commission cantonale genevoise de recours en matière d'assurance-chômage a rejeté le recours formé contre cette décision par D._. C.- Celui-ci interjette recours de droit administratif contre ce jugement, dont il requiert l'annulation, en concluant à ce que la caisse intimée lui alloue le montant de 20 612 fr. 40 reçu de la Caisse fédérale de compensation et renonce à lui réclamer la restitution du montant de 31 932 fr. 90. La caisse conclut implicitement au rejet du recours, ce que propose également le Groupe réclamations de l'office cantonal de l'emploi. Le Secrétariat d'Etat à l'économie n'a pas présenté de détermination.