Faits: Faits: A. De 1993 au 31 août 1999, T._ a travaillé comme enseignant au service de l'association X._. Aux fins d'assurer son personnel en prévoyance professionnelle, cette association a conclu, le 29 janvier 1999, un contrat d'adhésion avec la Fondation collective LPP de la Zurich, Compagnie d'Assurance sur la Vie (ci-après : la fondation). T._ a été affilié à ladite fondation dès le 1er janvier 1998. Le 28 août 2001, le Service de justice, de l'intérieur et des cultes de l'Etat de Vaud s'est adressé, en sa qualité d'autorité de surveillance des fondations (ci-après : l'autorité de surveillance), à l'association X._, l'informant de possibles irrégularités dans la gestion du dossier de prévoyance de T._ et lui demandant de rétablir la situation conformément au droit auprès de la fondation jusqu'au 15 septembre 2001. Il s'en est suivi des échanges de correspondance entre les diverses personnes concernées. Par lettre du 7 décembre 2001, la fondation a communiqué à l'association X._ un calcul de «rattrapage de l'épargne» de son ex-employé pour les années 1995 et 1999. Selon ce calcul, le montant de 1'420 fr. 15 restait à payer à la fondation. L'employeur a pris en charge la moitié de cette somme (710 fr. 15). Le 28 août 2001, le Service de justice, de l'intérieur et des cultes de l'Etat de Vaud s'est adressé, en sa qualité d'autorité de surveillance des fondations (ci-après : l'autorité de surveillance), à l'association X._, l'informant de possibles irrégularités dans la gestion du dossier de prévoyance de T._ et lui demandant de rétablir la situation conformément au droit auprès de la fondation jusqu'au 15 septembre 2001. Il s'en est suivi des échanges de correspondance entre les diverses personnes concernées. Par lettre du 7 décembre 2001, la fondation a communiqué à l'association X._ un calcul de «rattrapage de l'épargne» de son ex-employé pour les années 1995 et 1999. Selon ce calcul, le montant de 1'420 fr. 15 restait à payer à la fondation. L'employeur a pris en charge la moitié de cette somme (710 fr. 15). B. Le 30 janvier 2003, T._ a ouvert action contre l'association X._ et la fondation. Par jugement du 22 décembre 2003, le tribunal a partiellement admis la demande en ce sens que l'association X._ est débitrice de la fondation de la somme de 710 fr. 15 en capital; il a rejeté toutes autres ou plus amples conclusions. Par jugement du 22 décembre 2003, le tribunal a partiellement admis la demande en ce sens que l'association X._ est débitrice de la fondation de la somme de 710 fr. 15 en capital; il a rejeté toutes autres ou plus amples conclusions. C. T._ interjette recours de droit administratif contre ce jugement. Il conclut à son annulation et au renvoi de la cause à la juridiction cantonale. L'association X._ conclut implicitement au rejet du recours. La fondation et l'Office fédéral des assurances sociales ont tous deux présenté des observations.