Sachverhalt: A. Mit Verfügung vom 16. August 2012 - letztinstanzlich bestätigt mit Urteil des Bundesgerichts vom 3. Juli 2014 (Verfahren 8C_384/2014) - hob die IV-Stelle des Kantons Zürich den seit 1. Februar 2000 laufenden Anspruch auf eine ganze Invalidenrente des 1954 geborenen A._ rückwirkend per Ende Juni 2009 auf. Während des gegen diese Verfügung erhobenen Rechtsmittelverfahrens meldete sich der Versicherte am 4. März 2014 erneut zum Bezug einer Rente an. Er begründete sein Gesuch mit einem Bericht des Dr. med. B._, Facharzt für Kardiologie und Innere Medizin FMH, vom 15. Februar 2014. Mit Verfügung vom 18. November 2014 trat die IV-Stelle auf das Leistungsbegehren nicht ein. B. Das Sozialversicherungsgericht des Kantons Zürich wies die dagegen erhobene Beschwerde mit Entscheid vom 22. März 2016 ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen und beantragen, in Aufhebung des vorinstanzlichen Entscheides sei die IV-Stelle anzuweisen, auf die Neuanmeldung einzutreten und einen Anspruch auf Leistungen der Invalidenversicherung materiell zu prüfen. Es wird kein Schriftenwechsel durchgeführt.