Sachverhalt: A. Der 1964 geborene A._ arbeitete von 1995 bis 2000 und wiederum seit 1. Januar 2001, nunmehr in einem Teilzeitpensum von 80%, beim Restaurant B._. Ab 7. Mai 2001 blieb er aus gesundheitlichen Gründen der Arbeit fern. Am 8. November 2001 meldete er sich unter Hinweis auf eine Fibromyalgie bei der Invalidenversicherung zum Leistungsbezug an. Die IV-Stelle des Kantons Zürich holte u.a. eine polydisziplinäre Expertise der Medizinischen Abklärungsstelle am Spital C._ (MEDAS) vom 6. Februar 2003 ein. Am 21. November 2003 reichte A._ bei der Invalidenversicherung eine Anmeldung zum Rentenbezug ein, worauf die IV-Stelle am 22. April 2004 die Ablehnung des Gesuchs verfügte. Am 24. Mai 2004 reichte der Versicherte hiegegen Einsprache ein. Die IV-Stelle liess A._ erneut stationär abklären, diesmal vom 18. bis 22. September 2006 im Zentrum D._, Expertise vom 12. Dezember 2006, ergänzt am 23. April 2007). Schliesslich erstattete Dr. med. E._ am 23. Januar 2008 ein psychiatrisches Gutachten. Der Versicherte reichte am 29. September 2008 eine Privatexpertise der Psychiaterin Frau Dr. med. F._, vom 21. Januar 2008 ein. Dr. med. E._, der schon vorgängig Kenntnis vom Privatgutachten gehabt hatte, hielt am 3. Februar 2008 an seiner Einschätzung fest. Am 10. Februar 2009 erstattete der Psychiater pract. med. G._ vom Regionalen Ärztlichen Dienst (RAD) einen Untersuchungsbericht. Mit Entscheid vom 11. Mai 2009 hiess die IV-Stelle die Einsprache gegen die Verfügung vom 22. April 2004 teilweise gut und eröffnete der Ausgleichskasse H._, dass bei A._ ab 1. Mai 2002 ein Invaliditätsgrad von 100 % bestehe. Am 20. November 2009 reichte die H._ Pensionskasse ein psychiatrisches Privatgutachten ihres Vertrauensarztes Dr. med. I._ vom 18. November 2009 ein. Am 20. Januar 2010 erliess die IV-Stelle für den Zeitraum vom 1. Mai 2002 bis 30. November 2007 sowie ab 1. Dezember 2007 die entsprechenden Verfügungen über jeweils eine ganze Invalidenrente. Die Pensionskasse H._ reichte gegen diese Verfügungen Beschwerde beim Sozialversicherungsgericht des Kantons Zürich ein. Mit Verfügung vom 21. Mai 2010 wurde A._ zum Prozess beigeladen. Das Sozialversicherungsgericht wies die Beschwerde mit Entscheid vom 30. September 2011 ab. Eine dagegen von der Pensionskasse H._ erhobene Beschwerde in öffentlich-rechtlichen Angelegenheiten hiess das Bundesgericht mit Urteil vom 18. April 2012 gut und wies die Sache an die IV-Stelle des Kantons Zürich zurück, damit sie, nach erfolgter Abklärung im Sinne der Erwägungen, über den Anspruch von A._ auf eine Invalidenrente neu verfüge. Die IV-Stelle holte daraufhin bei Dr. med. J._, FMH innere Medizin und Rheumaerkrankungen, und Dr. med. K._, Facharzt für Psychiatrie und Psychotherapie FMH, ein interdisziplinäres Gutachten vom 21. September 2012 ein. Mit Verfügung vom 11. Oktober 2013 lehnte die IV-Stelle den Anspruch auf Leistungen der Invalidenversicherung ab. B. A._ liess Beschwerde führen mit dem Antrag, unter Aufhebung der Verfügung vom 11. Oktober 2013 seien ihm die gesetzlichen Leistungen auszurichten, insbesondere sei ihm ab 1. Mai 2002 eine ganze, mindestens eine Dreiviertels-Rente der Invalidenversicherung zuzusprechen. Mit Entscheid vom 30. September 2014 wies das Sozialversicherungsgericht des Kantons Zürich die Beschwerde ab. C. Mit Beschwerde in öffentlich-rechtlichen Angelegenheiten lässt A._ das vorinstanzlich gestellte Rechtsbegehren erneuern.