Faits:
Faits:
A. A.a A._, né en 1960, a travaillé en qualité de maçon en Suisse à partir de mars 1987. Atteint d'une hernie discale depuis le 15 juillet 1996, il a définitivement cessé toute activité professionnelle le 9 août 1996. Le 28 janvier 1997, l'intéressé a présenté une demande de prestations de l'assurance-invalidité tendant au reclassement dans une nouvelle profession.
Par prononcé du 14 novembre 1997, l'Office de l'assurance-invalidité pour le canton de Vaud (ci-après : l'OAI) a évalué le degré d'invalidité de l'assuré à 61 % et lui a communiqué qu'il avait droit à une demi-rente dès le 1er juillet 1997. Cette communication était fondée sur un rapport du 4 mars 1997 de la doctoresse B._ - spécialiste FMH en médecine interne et rhumatologie et médecin traitant de l'assuré -, laquelle a posé le diagnostic de lombosciatalgies gauches non-déficitaires, troubles statiques et dégénératifs du rachis lombaire, hernie discale paramédiane gauche L4-L5, status après cure de hernie discale L5-S1 en 1992, excès pondéral modéré et surcharge psychogène. Elle a estimé l'incapacité de travail à 100 % dans l'activité de maçon; en revanche, dans une activité plus légère, en position alternée, l'incapacité pouvait être évaluée à 50 %.
A.b Le 18 février 1998, l'assuré a déposé une demande de révision, fondée sur un rapport de la doctoresse B._, du 17 février 1998, lequel faisait état, en sus du diagnostic déjà connu, d'un trouble somatoforme douloureux. Pour la doctoresse, l'incapacité de travail était totale dans toute activité, même légère, depuis le 9 janvier 1998.
Par décision formelle du 24 février 1999, l'OAI a alloué à A._ une demi-rente d'invalidité avec effet au 1er juillet 1997. Cette décision n'a pas été attaquée.
Dans le cadre de l'instruction de la demande de révision, l'OAI a recueilli une expertise du Département universitaire de psychiatrie adulte (DUPA), du 9 mars 1999. Il ressort de dite expertise que l'assuré souffre d'un trouble somatoforme douloureux persistant, d'un état dépressif d'épisode actuel moyen et d'une structure de personnalité de type prépsychotique. Après avoir constaté qu'aucune reprise du travail n'avait été possible depuis le 9 août 1996, les spécialistes ayant examiné l'assuré ont jugé difficile d'améliorer la capacité de travail d'un patient déjà bien installé dans ses douleurs et dénotant un état dépressif difficilement accessible à un traitement psychothérapeutique. Compte tenu par ailleurs de ressources psychiques très limitées, les médecins ont estimé qu'un reclassement professionnel paraissait voué à l'échec.
A.c Par projet de décision du 1er septembre 1999, l'OAI a rejeté la demande de révision, au motif que dans une activité légère, l'assuré conservait une capacité de travail de 50 %. Après que l'assuré s'est opposé audit projet et a demandé la mise en oeuvre d'une expertise multidisciplinaire, l'OAI a confié une expertise à la Policlinique médicale universitaire, Centre médical d'observation de l'assurance-invalidité (COMAI), à Lausanne.
Dans un rapport du 21 décembre 2000, les docteurs D._, P._, et U._, tous trois au service de cet établissement, ont posé le diagnostic de trouble somatoforme douloureux persistant, épisode dépressif moyen avec syndrome somatique, anxiété généralisée, trouble de la personnalité non spécifique (personnalité prépsychotique), lombo-sciatalgies pseudo-radiculaires bilatérales avec status post cure de hernie dicale L5-S1 en 1990 et discopathie L4-L5 et L5-S1 et hypertriglycéridémie traitée. Ils ont estimé que l'assuré présentait une incapacité totale de travail comme maçon ou dans d'autres professions comportant des travaux lourds. En revanche, dans une activité légère adaptée, la capacité de travail était de l'ordre de 50 %.
A.d Par décision du 5 avril 2001, l'OAI a maintenu le droit à la demi-rente et rejeté la demande de révision, après avoir arrêté le taux d'invalidité à 57,39 %.
A.d Par décision du 5 avril 2001, l'OAI a maintenu le droit à la demi-rente et rejeté la demande de révision, après avoir arrêté le taux d'invalidité à 57,39 %.
B. Le 3 mai 2001, l'assuré a recouru contre cette décision devant le Tribunal des assurances du canton de Vaud, en concluant, sous suite de dépens, à l'octroi d'une rente entière d'invalidité. Pendant la procédure, plusieurs avis médicaux ont été versés au dossier. Il s'agit de deux rapports du docteur C._ (des 19 septembre 2001 et 8 mars 2002), spécialiste FMH en psychiatrie et psychothérapie, lequel a suivi l'assuré depuis le 25 mai 2001, ainsi que d'un rapport d'évaluation du professeur L._, médecin-chef de la division de neuropsychologie du Centre X._.
Par lettre du 3 octobre 2002, laquelle se fonde sur un rapport du 18 septembre 2002 de l'Hôpital Y._, la doctoresse B._ a annoncé à l'OAI une baisse brutale de l'acuité visuelle de l'oeil gauche de l'assuré, attribuée à un embole de cholestérol dans une branche de l'artère rétinienne, avec ischémie rétinienne.
Le 10 décembre 2002, le Tribunal cantonal des assurances a demandé à la Direction médicale du secteur psychiatrique de l'Ouest vaudois, à l'Hôpital Z._, de se déterminer sur l'état de santé de A._ ainsi que sur une éventuelle aggravation.
Dans son rapport d'expertise établi le 12 juin 2003, le docteur W._ médecin auprès dudit établissement, a posé le diagnostic de:
- trouble somatoforme douloureux persistant (F 45.4)
- trouble dépressif majeur, récurrent, de sévérité moyenne, avec syndrome somatique incomplet, et rémission intercurrente partielle (F 33.11)
- syndrome d'anxiété généralisée, peut-être secondaire au trouble de l'humeur (F 41.1)
- trouble de la personnalité non spécifique avec traits passifs, dépendants, alexithymiques et paranoïdes sur une structure de personnalité prépsychotique (F 60.8)
- probable intelligence limite, voire retard mental léger, d'origine indéterminée (F 70)
- lombo-sciatalgies gauches non déficitaires, avec troubles statiques dégénératifs du rachis lombaire. Hernie discale paramédiane gauche L4-L5, et status après cure de hernie discale L5-S1 en 1990 (M 54)
- excès pondéral modéré (E 66)
- hypertriglycéridémie traitée
- status après embole de cholestérol dans une branche de l'artère rétinienne gauche.
L'expert conclut à une pathologie psychiatrique grave, d'évolution défavorable et peu accessible à un traitement psychiatrique. Il ajoute qu'il n'est pas raisonnable d'attendre des mesures médicales une amélioration de la capacité de travail et que des mesures professionnelles ne seraient pas envisageables à moyen terme. L'incapacité de travail est évaluée à 80 % au moins. L'aggravation de l'état de santé psychique de l'assuré est située en automne 1997, lorsque ce dernier a présenté une généralisation de ses douleurs. Selon l'expert, c'est à cette période qu'il conviendrait de situer le début d'une incapacité presque totale d'exercer une activité même légère, adaptée à l'état de santé somatique.
Après s'être déterminées sur l'expertise judiciaire, les parties ont maintenu leurs conclusions.
Par jugement du 10 février 2004, Le Tribunal des assurances du canton de Vaud a rejeté le recours déposé par l'assuré.
Par jugement du 10 février 2004, Le Tribunal des assurances du canton de Vaud a rejeté le recours déposé par l'assuré.
C. A._ interjette un recours de droit administratif contre ce jugement dont il demande l'annulation, en concluant au renvoi de la cause à l'administration afin qu'elle lui alloue une rente entière d'invalidité.
Dans sa réponse, l'OAI propose le rejet du recours tandis, que l'Office fédéral des assurances sociales a renoncé à se prononcer.

Considérant en droit:
1. La loi fédérale sur la partie générale des assurances sociales (LPGA) du 6 octobre 2000, entrée en vigueur le 1er janvier 2003, n'est pas applicable au présent litige, dès lors que le juge des assurances sociales n'a pas à prendre en considération les modifications du droit ou de l'état de fait postérieures à la date déterminante de la décision litigieuse du 5 avril 2001 (<ref-ruling> consid. 1.2 et les références).
1. La loi fédérale sur la partie générale des assurances sociales (LPGA) du 6 octobre 2000, entrée en vigueur le 1er janvier 2003, n'est pas applicable au présent litige, dès lors que le juge des assurances sociales n'a pas à prendre en considération les modifications du droit ou de l'état de fait postérieures à la date déterminante de la décision litigieuse du 5 avril 2001 (<ref-ruling> consid. 1.2 et les références).
2. Selon l'<ref-law>, en vigueur jusqu'au 31 décembre 2002, si l'invalidité d'un bénéficiaire de rente se modifie de manière à influencer le droit à la rente, celle-ci est, pour l'avenir, augmentée, réduite ou supprimée. Tout changement important des circonstances, propre à influencer le degré d'invalidité, donc le droit à la rente, peut donner lieu à une révision de celle-ci. Le point de savoir si un tel changement s'est produit doit être tranché en comparant les faits tels qu'ils se présentaient au moment de la décision initiale de rente et les circonstances régnant à l'époque de la décision litigieuse (<ref-ruling> consid. 2 et la référence; voir également <ref-ruling> consid. 2b et 390 consid. 1b).
3. 3.1 En l'espèce, les premiers juges ont considéré que l'état de santé du recourant n'avait pas subi de modification notable, de nature à justifier une révision de son droit à la rente. Pour arriver à cette constatation, ils ont comparé la situation entre le 1er juillet 1997 et l'automne 1997. Conformément à la jurisprudence précitée (cf. consid. 1), la question d'une éventuelle aggravation de l'état de santé du recourant doit cependant être déterminée en comparant les faits entre le 24 février 1999 et le 5 avril 2001.
3.2 Il ressort des rapports médicaux antérieurs à la décision initiale de rente du 24 février 1999 que d'un point de vue somatique, le recourant souffrait de lombosciatalgies gauches, de troubles statiques et dégénératifs du rachis, d'une hernie discale L4-L5 et d'un status après cure de hernie discale L5-S1 droite en 1990. Dans son rapport du 4 mars 1997, la doctoresse B._ attestait une capacité résiduelle de travail de 50 % dans une activité légère. Dans un rapport du 17 février 1998, ce même médecin constatait une généralisation des douleurs de l'assuré depuis l'automne 1997, et concluait à une incapacité de travail totale dès le 9 janvier 1998 en raison d'un trouble somatoforme douloureux.
Ces constatations coïncident avec les conclusions de l'expertise établie par le DUPA le 9 mars 1999, selon lesquelles une reprise de l'activité professionnelle par l'assuré paraissait compromise en raison d'une symptomatologie bien installée depuis deux ans et demi.
Ce point de vue est en outre partagé par la doctoresse N._, laquelle a examiné l'assuré dans le cadre du concilium psychiatrique du COMAI en octobre 2000. Celle-ci a en effet confirmé à son tour le même diagnostic de trouble somatoforme douloureux. Elle a par ailleurs retenu que l'état dépressif et le trouble de la personnalité non spécifique déjà connus en mars 1999 étaient toujours présents. Elle a cependant noté l'apparition d'une idéation suicidaire et d'un sentiment d'anxiété d'intensité modérée à sévère qui ne semblaient pas être présents en mars 1999. A cet égard, la doctoresse V._, médecin-conseil de l'AI, a expliqué qu'une aggravation psychique depuis 1999 n'était pas prouvée du seul fait que l'idéation suicidaire et l'anxiété n'avaient pas été mentionnés auparavant. Selon elle, ces troubles s'expliquaient aussi par l'incertitude de l'assuré par rapport à l'avenir compte tenu de la durée de l'instruction et du refus d'une rente entière.
Dans ses rapports des 19 septembre 2001 et 8 mars 2002, se fondant sur un diagnostic déjà connu, le docteur C._ a fait état d'une incapacité de gain certainement supérieure à 70 % et ce, depuis août 1996 déjà.
Il ressort encore de l'expertise judiciaire du 12 juin 2003 que le recourant souffre d'une pathologie psychiatrique grave depuis 1996-1997. Celle-ci justifie une incapacité de travail d'au moins 80 % selon l'expert, étant précisé qu'une aggravation de l'état de santé est marquée à partir de l'automne 1997.
Les documents médicaux précités n'établissent dès lors pas que l'état de santé du recourant se soit modifié depuis la décision d'octroi de la rente. Celui-ci s'est bien plutôt aggravé dès l'automne 1997 déjà. Il en découle que les conditions d'une révision n'étaient pas réunies en l'occurrence. S'il estimait avoir droit à une rente entière, le recourant aurait dû, bien plutôt, attaquer la décision du 24 février 1999. On notera par ailleurs que l'Office intimé a rappelé, dans ses déterminations du 10 septembre 2003 au sujet de l'expertise judiciaire, qu'une révision du cas devait être entreprise prochainement en raison de la baisse de l'acuité visuelle de l'oeil gauche du recourant.

Par ces motifs, le Tribunal fédéral des assurances prononce:
Par ces motifs, le Tribunal fédéral des assurances prononce:
1. Le recours est rejeté.
1. Le recours est rejeté.
2. Il n'est pas perçu de frais de justice.
2. Il n'est pas perçu de frais de justice.
3. Le présent arrêt sera communiqué aux parties, au Tribunal des assurances du canton de Vaud et à l'Office fédéral des assurances sociales.
Lucerne, le 7 février 2006
Au nom du Tribunal fédéral des assurances
Le Président de la IVe Chambre: p. la Greffière: