Sachverhalt: Sachverhalt: A. Der 1959 geborene, aus Mazedonien stammende A._ war im Gastgewerbe tätig und führte zuletzt als Selbstständigerwerbender ein Restaurant in X._. Im Herbst 2004 gab er dieses auf. Seither geht er keiner Erwerbstätigkeit mehr nach. Am 2. September 2004 meldete er sich unter Hinweis auf Diabetes, Thrombosen, Magenbeschwerden und psychische Beeinträchtigungen bei der Invalidenversicherung zum Rentenbezug an. Die IV-Stelle des Kantons Aargau holte daraufhin den Bericht des Dr. med. S._, Spezialarzt FMH für physikalische Medizin und Rehabilitation, speziell Rheumatologie, vom 7. November 2004 ein, welchem der Arztbericht des Bezirksspitals Y._ vom 14. Januar 2004 und der im Auftrag des Taggeldversicherers (SWICA Gesundheitsorganisation) erstellte Untersuchungsbericht des Dr. med. O._, Spezialarzt FMH für Psychiatrie und Psychotherapie, vom 5. Oktober 2004 beilagen. Zudem zog sie den Bericht des med. pract. E._, Psychiatrische Praxisgemeinschaft, vom 13./14. Januar 2005 bei. Nach Einholung einer Stellungnahme des Regionalen Ärztlichen Dienstes lehnte die IV-Stelle das Leistungsbegehren mit Verfügung vom 15. Juli 2005 ab mit der Begründung, aus somatischer Sicht bestehe keine invaliditätsbegründende Arbeitsunfähigkeit und mit Bezug auf die psychische Problematik fehle es bei im Vordergrund stehender psychosozialer Belastung am Charakter der Dauerhaftigkeit. Im anschliessenden Einspracheverfahren wurden die von der SWICA eingeholten Berichte von Frau prakt. med. L._, Praxis für Psychiatrie und Psychotherapie FMH, vom 7. Februar und 15. Juni 2005 eingereicht. Mit Einspracheentscheid vom 8. September 2005 hielt die IV-Stelle an ihrem Standpunkt fest. A. Der 1959 geborene, aus Mazedonien stammende A._ war im Gastgewerbe tätig und führte zuletzt als Selbstständigerwerbender ein Restaurant in X._. Im Herbst 2004 gab er dieses auf. Seither geht er keiner Erwerbstätigkeit mehr nach. Am 2. September 2004 meldete er sich unter Hinweis auf Diabetes, Thrombosen, Magenbeschwerden und psychische Beeinträchtigungen bei der Invalidenversicherung zum Rentenbezug an. Die IV-Stelle des Kantons Aargau holte daraufhin den Bericht des Dr. med. S._, Spezialarzt FMH für physikalische Medizin und Rehabilitation, speziell Rheumatologie, vom 7. November 2004 ein, welchem der Arztbericht des Bezirksspitals Y._ vom 14. Januar 2004 und der im Auftrag des Taggeldversicherers (SWICA Gesundheitsorganisation) erstellte Untersuchungsbericht des Dr. med. O._, Spezialarzt FMH für Psychiatrie und Psychotherapie, vom 5. Oktober 2004 beilagen. Zudem zog sie den Bericht des med. pract. E._, Psychiatrische Praxisgemeinschaft, vom 13./14. Januar 2005 bei. Nach Einholung einer Stellungnahme des Regionalen Ärztlichen Dienstes lehnte die IV-Stelle das Leistungsbegehren mit Verfügung vom 15. Juli 2005 ab mit der Begründung, aus somatischer Sicht bestehe keine invaliditätsbegründende Arbeitsunfähigkeit und mit Bezug auf die psychische Problematik fehle es bei im Vordergrund stehender psychosozialer Belastung am Charakter der Dauerhaftigkeit. Im anschliessenden Einspracheverfahren wurden die von der SWICA eingeholten Berichte von Frau prakt. med. L._, Praxis für Psychiatrie und Psychotherapie FMH, vom 7. Februar und 15. Juni 2005 eingereicht. Mit Einspracheentscheid vom 8. September 2005 hielt die IV-Stelle an ihrem Standpunkt fest. B. Im dagegen eingeleiteten Beschwerdeverfahren liess A._ den Bericht von Frau prakt. med. L._ vom 30. November 2005 auflegen. Mit Entscheid vom 18. April 2006 wies das Versicherungsgericht des Kantons Aargau die Beschwerde ab. B. Im dagegen eingeleiteten Beschwerdeverfahren liess A._ den Bericht von Frau prakt. med. L._ vom 30. November 2005 auflegen. Mit Entscheid vom 18. April 2006 wies das Versicherungsgericht des Kantons Aargau die Beschwerde ab. C. A._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Rechtsbegehren, es sei der kantonale Entscheid aufzuheben und rückwirkend eine ganze, eventualiter eine halbe Rente zuzusprechen. Während die IV-Stelle auf Abweisung der Verwaltungsgerichtsbeschwerde schliesst, verzichtet das Bundesamt für Sozialversicherungen auf eine Vernehmlassung.