Sachverhalt: Sachverhalt: A. K._, geboren 1944, war zuletzt bis 30. November 1995 bei der Firma P._ AG in X._ als Bauarbeiter tätig. Ab. 1. Dezember 1995 war er arbeitslos. Am 13. März 1998 meldete er sich wegen eines Rückenleidens (Diskushernie) bei der IV-Stelle Zug zum Leistungsbezug (medizinische Eingliederungsmassnahmen, Invalidenrente) an. Die IV-Stelle Zug holte einen Arbeitgeberbericht ein, zog die SUVA-Akten zu einem am 3. September 1994 erlittenen Verkehrsunfall (mit multiplen Quetschungen und Hämatomen sowie Meniskusläsion rechts) bei, klärte die medizinische Situation u.a. durch Einholung eines Gutachtens der Klinik Y._, vom 18. November 1998 ab und tätigte berufsberaterische Abklärungen. Mit Vorbescheid vom 20. April 2000 teilte sie dem Versicherten mit, dass er bei einem Invaliditätsgrad von 58 % mit Wirkung ab 1. März 1998 Anspruch auf eine halbe Invalidenrente habe. Mit Stellungnahme vom 23. Mai 2000 liess K._ die Ausrichtung einer ganzen Rente bereits ab März 1997 beantragen; eventualiter sei ein interdisziplinäres Gutachten einzuholen oder er sei einer beruflichen Massnahme (BEFAS) zuzuführen. Die IV-Stelle erteilte einen weiteren Gutachterauftrag an die Rheumapoliklinik des Universitätsspitals A._. Weil der Anspruch auf mindestens eine halbe Rente unbestritten war, sprach sie dem Versicherten mit Verfügung vom 21. September 2000 vorerst eine halbe Rente ab 1. März 1998 zu. Das Universitätsspital A._ stellte im Gutachten vom 15. September 2001 folgende Diagnosen: lumbospondylogenes Syndrom linksbetont bei degenerativen Veränderungen mit Osteochondrose L4/5, Diskushernie L4/5 mit Einengung des Rezessus links und Kompression der Wurzel L5 ohne klinisches Korrelat sowie möglicher Spinalkanalstenose, muskulärer Dekonditionierung mit Haltungsinsuffizienz; Gonalgien, betont rechts unklarer Ätiologie DD: beginnende Gonarthrose, Status nach arthroskopischer medialer Hinterhorn-Resektion rechts am 9. November 2004; Verdacht auf Schmerzverarbeitungsstörung. Als Bauarbeiter sei der Versicherte zu 100 % arbeitsunfähig; für mittelschwere körperliche Belastungen bestehe eine 50%ige Arbeitsunfähigkeit; für eine angepasste, körperlich leichte rückenschonende Tätigkeit ohne lange Zwangshaltungen und Heben von Lasten über 15 kg bestehe aus rheumatologischer Sicht keine Einschränkung. Eine Verbesserung der Arbeitsfähigkeit sei nicht möglich. Nachdem die IV-Berufsberater weitere Abklärungen vorgenommen hatten und inzwischen im parallelen UV-Verfahren die Ablehnung der Leistungspflicht der SUVA für die vorliegenden Beschwerden mangels Kausalität zum Unfall vom 3. September 1994 vom Eidgenössischen Versicherungsgericht bestätigt worden war (Urteil vom 21. Februar 2003, Prozess U 306/02), hielt die IV-Stelle mit (Wiedererwägungs-)Verfügung vom 20. November 2003 am seinerzeit errechneten Invaliditätsgrad von 58 % fest. Die dagegen erhobene Einsprache, womit vor allem die jeweilige Berechnung von Validen- und Invalideneinkommen bemängelt wurde, wies sie mit Einspracheentscheid vom 9. August 2004 ab. A. K._, geboren 1944, war zuletzt bis 30. November 1995 bei der Firma P._ AG in X._ als Bauarbeiter tätig. Ab. 1. Dezember 1995 war er arbeitslos. Am 13. März 1998 meldete er sich wegen eines Rückenleidens (Diskushernie) bei der IV-Stelle Zug zum Leistungsbezug (medizinische Eingliederungsmassnahmen, Invalidenrente) an. Die IV-Stelle Zug holte einen Arbeitgeberbericht ein, zog die SUVA-Akten zu einem am 3. September 1994 erlittenen Verkehrsunfall (mit multiplen Quetschungen und Hämatomen sowie Meniskusläsion rechts) bei, klärte die medizinische Situation u.a. durch Einholung eines Gutachtens der Klinik Y._, vom 18. November 1998 ab und tätigte berufsberaterische Abklärungen. Mit Vorbescheid vom 20. April 2000 teilte sie dem Versicherten mit, dass er bei einem Invaliditätsgrad von 58 % mit Wirkung ab 1. März 1998 Anspruch auf eine halbe Invalidenrente habe. Mit Stellungnahme vom 23. Mai 2000 liess K._ die Ausrichtung einer ganzen Rente bereits ab März 1997 beantragen; eventualiter sei ein interdisziplinäres Gutachten einzuholen oder er sei einer beruflichen Massnahme (BEFAS) zuzuführen. Die IV-Stelle erteilte einen weiteren Gutachterauftrag an die Rheumapoliklinik des Universitätsspitals A._. Weil der Anspruch auf mindestens eine halbe Rente unbestritten war, sprach sie dem Versicherten mit Verfügung vom 21. September 2000 vorerst eine halbe Rente ab 1. März 1998 zu. Das Universitätsspital A._ stellte im Gutachten vom 15. September 2001 folgende Diagnosen: lumbospondylogenes Syndrom linksbetont bei degenerativen Veränderungen mit Osteochondrose L4/5, Diskushernie L4/5 mit Einengung des Rezessus links und Kompression der Wurzel L5 ohne klinisches Korrelat sowie möglicher Spinalkanalstenose, muskulärer Dekonditionierung mit Haltungsinsuffizienz; Gonalgien, betont rechts unklarer Ätiologie DD: beginnende Gonarthrose, Status nach arthroskopischer medialer Hinterhorn-Resektion rechts am 9. November 2004; Verdacht auf Schmerzverarbeitungsstörung. Als Bauarbeiter sei der Versicherte zu 100 % arbeitsunfähig; für mittelschwere körperliche Belastungen bestehe eine 50%ige Arbeitsunfähigkeit; für eine angepasste, körperlich leichte rückenschonende Tätigkeit ohne lange Zwangshaltungen und Heben von Lasten über 15 kg bestehe aus rheumatologischer Sicht keine Einschränkung. Eine Verbesserung der Arbeitsfähigkeit sei nicht möglich. Nachdem die IV-Berufsberater weitere Abklärungen vorgenommen hatten und inzwischen im parallelen UV-Verfahren die Ablehnung der Leistungspflicht der SUVA für die vorliegenden Beschwerden mangels Kausalität zum Unfall vom 3. September 1994 vom Eidgenössischen Versicherungsgericht bestätigt worden war (Urteil vom 21. Februar 2003, Prozess U 306/02), hielt die IV-Stelle mit (Wiedererwägungs-)Verfügung vom 20. November 2003 am seinerzeit errechneten Invaliditätsgrad von 58 % fest. Die dagegen erhobene Einsprache, womit vor allem die jeweilige Berechnung von Validen- und Invalideneinkommen bemängelt wurde, wies sie mit Einspracheentscheid vom 9. August 2004 ab. B. K._ erhob dagegen Beschwerde beim Verwaltungsgericht des Kantons Zug mit dem Antrag, in Aufhebung des Einspracheentscheides sei ihm ab 1. Januar 2004 mindestens eine Dreiviertelsrente zuzusprechen. Die IV-Stelle beantragte, auf die Beschwerde sei nicht einzutreten, eventuell sei sie abzuweisen. Mit Entscheid vom 28. April 2005 wies das kantonale Gericht die Beschwerde ab. B. K._ erhob dagegen Beschwerde beim Verwaltungsgericht des Kantons Zug mit dem Antrag, in Aufhebung des Einspracheentscheides sei ihm ab 1. Januar 2004 mindestens eine Dreiviertelsrente zuzusprechen. Die IV-Stelle beantragte, auf die Beschwerde sei nicht einzutreten, eventuell sei sie abzuweisen. Mit Entscheid vom 28. April 2005 wies das kantonale Gericht die Beschwerde ab. C. Mit Verwaltungsgerichtsbeschwerde beantragt der Versicherte, in Aufhebung des kantonalen Entscheides seien ihm die gesetzlichen Leistungen zuzusprechen und die IV-Stelle zu verpflichten, für einen Invaliditätsgrad von über 60 % eine Dreiviertelsrente auszurichten. D. Die IV-Stelle schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde, ebenso sinngemäss das kantonale Gericht. Das Bundesamt für Sozialversicherungen verzichtet auf eine Vernehmlassung.