Sachverhalt: A. S._ (geboren 1976) absolvierte von 1992 bis 1996 eine Lehre als Audio-Video-Elektroniker bei der Firma X._ und arbeitete ab Oktober 1997 an gleicher Stelle als Tonoperateur. Unter Hinweis auf im Sommer 1994 erlittene Zeckenbisse meldete der Arbeitgeber den Versicherten am 16. Januar 1998 beim obligatorischen Unfallversicherer an. Am 23. Februar 1999 erfolgte die Anmeldung zum Leistungsbezug bei der Invalidenversicherung. Nach Abklärungen in beruflich-erwerblicher, medizinischer und beruflich-eingliederungsmässiger Hinsicht sprach die IV-Stelle des Kantons Zürich S._ mit Verfügung vom 4. Juli 2001 bei einem Invaliditätsgrad von 100 % eine ganze Invalidenrente ab Oktober 1998 zu. Im Rahmen eines 2003 durchgeführten Revisionsverfahrens wurde die bisherige Invalidenrente unverändert belassen. Anlässlich eines im Jahre 2007 eingeleiteten Revisionsverfahrens holte die IV-Stelle einen Bericht des Hausarztes Dr. med. Z._, Innere Medizin FMH, vom 23. April 2007 ein. Ferner liess sie den Versicherten bei der A._ polydisziplinär begutachten (Gutachten vom 30. September 2008). Am 27. April 2009 trat der Versicherte eine dreimonatige Abklärung im P._ an, wo er sich bis zum vorzeitigen Austritt am 26. Juni 2009 aufhielt (Bericht P._ vom 29. Juni 2009). Nachdem er das Angebot eines Belastbarkeitstrainings nicht hatte annehmen wollen, schloss die IV-Stelle die beruflichen Massnahmen mit Mitteilung vom 26. Oktober 2009 ab. Nach Einholung eines Verlaufsberichts des Hausarztes Dr. med. Z._ vom 1. Februar 2010 und nach durchgeführtem Vorbescheidverfahren setzte die IV-Stelle die ganze Rente mit Verfügung vom 5. Juli 2010 auf eine halbe Rente herab. B. Die hiegegen erhobene Beschwerde wies das Sozialversicherungsgericht des Kantons Zürich mit Entscheid vom 10. August 2011 ab. C. S._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen mit dem Antrag, in Aufhebung des vorinstanzlichen Entscheides sei die Sache an die IV-Stelle zur weiteren Abklärung zurückzuweisen. Eventuell sei die Sache an das kantonale Gericht zur Einholung eines Gerichtsgutachtens zurückzuweisen. Die IV-Stelle schliesst auf Abweisung der Beschwerde. Das kantonale Gericht und das Bundesamt für Sozialversicherungen verzichten auf eine Vernehmlassung.