Sachverhalt: A. Der 1958 geborene A._ bezieht gestützt auf die Verfügung der IV-Stelle des Kantons Zug vom 15. Juni 2009 seit 1. April 2007 bei einem Invaliditätsgrad von 55 % eine halbe Rente der Invalidenversicherung. Mit rechtskräftigen Verfügungen vom 17. November 2011 und 27. August 2014 wies die IV-Stelle Rentenerhöhungsgesuche des Versicherten ab. Auf ein erneutes solches Begehren vom März 2015 trat sie mit Verfügung vom 10. November 2015 nicht ein, da keine relevante Veränderung glaubhaft gemacht worden sei. B. Die von A._ gegen die Verfügung vom 10. November 2015 erhobene Beschwerde wies das Verwaltungsgericht des Kantons Zug mit Entscheid vom 14. April 2016 ab. C. Mit Beschwerde in öffentlich-rechtlichen Angelegenheiten beantragt A._, der vorinstanzliche Entscheid sei aufzuheben und die IV-Stelle sei zu verpflichten, auf das Leistungsbegehren vom März 2015 einzutreten und die notwendigen Abklärungen zu treffen. Die vorinstanzlichen Akten wurden eingeholt. Ein Schriftenwechsel wird nicht durchgeführt.