Sachverhalt: A. Der 1965 geborene A._ meldete sich am 17. Februar 2007 unter Hinweis auf eine Hörschädigung zu Umschulungsmassnahmen und zum Bezug einer Rente bei der Invalidenversicherung an. Die IV-Stelle Glarus verneinte mit Verfügung vom 29. September 2009 einen Leistungsanspruch. Dies bestätigte das Verwaltungsgericht des Kantons Glarus mit Entscheid vom 1. September 2010. Am 14. März 2015 meldete sich A._ erneut zum Leistungsbezug an und machte nebst der Hörschädigung eine Silikose der Lungen geltend. Am 11. Mai 2015 erliess die Schweizerische Unfallversicherungsanstalt (SUVA) eine Nichteignungsverfügung für Arbeiten mit Exposition zu Quarzstaub. Mit Verfügung vom 23. September 2015 verneinte die IV-Stelle abermals einen Leistungsanspruch, da A._ zwar in seiner angestammten Tätigkeit als Bauhilfsarbeiter vollständig arbeitsunfähig sei, für eine leichte Verweisungstätigkeit, welche der Schwerhörigkeit Rechnung tragen würde, bestehe hingegen keine höhergradige und längerdauernde Arbeitsunfähigkeit. B. Das Verwaltungsgericht des Kantons Glarus wies die dagegen erhobene Beschwerde, ausgehend von einem rentenausschliessenden Invaliditätsgrad, mit Entscheid vom 2. Juni 2016 ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen und unter Aufhebung des angefochtenen Entscheids die Zusprechung einer Invalidenrente beantragen. Ein Schriftenwechsel wurde nicht durchgeführt.