Sachverhalt: Mit Einspracheentscheid vom 28. August 2006 bestätigte die IV-Stelle Schwyz ihre Verfügung vom 4. Mai 2006, mit welcher sie G._ rückwirkend ab 1. September 2005 eine Dreiviertelsrente zugesprochen hatte. Eine mit dem Begehren um Gewährung einer ganzen Invalidenrente erhobene Beschwerde wies das Verwaltungsgericht des Kantons Schwyz mit Entscheid vom 17. Januar 2007 ab. G._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen und seinen im kantonalen Verfahren gestellten Antrag erneuern. Die IV-Stelle sieht von einer materiellen Stellungnahme zur Sache ab. Das Bundesamt für Sozialversicherungen verzichtet auf eine Vernehmlassung.