Sachverhalt: A. Der 1952 geborene Z._, Gipser von Beruf, gründete im Jahr .... die Firma R._ AG. Wegen Kniebeschwerden verkaufte er seinen Betrieb am .... . Seitdem arbeitet er in einem 50 %-Pensum für diese Firma und ist in den Bereichen Offertwesen, Ausmessungen, Chauffeurtätigkeiten sowie Kundenaquisition tätig. Z._ leidet an beiden Kniegelenken an Gonarthrose mit Chondrokalzinose bei Status nach Implantation einer Hemischlittenprothese links im Mai 2007. Am 27. März 2007 meldete er sich bei der Invalidenversicherung zum Bezug von Leistungen an. Aufgrund medizinischer Erhebungen und eines Abklärungsberichtes für Selbstständigerwerbende teilte die IV-Stelle Schwyz dem Versicherten mit Vorbescheid vom 20. Mai 2008 mit, bei einem Invaliditätsgrad von 32 % bestehe kein Rentenanspruch. Nach dagegen erhobenem Einwand hielt die IV-Stelle daran fest und wies das Leistungsbegehren mit Verfügung vom 26. Juni 2008 ab. B. Das Verwaltungsgericht des Kantons Schwyz wies die dagegen erhobene Beschwerde mit Entscheid vom 19. Dezember 2008 ab. C. Z._ führt Beschwerde an das Bundesgericht mit den Anträgen, unter Kosten- und Entschädigungsfolgen sei der angefochtene Entscheid dahingehend abzuändern, dass ihm eine Invalidenrente zusteht. Eventualiter sei die Streitsache an die IV-Stelle Schwyz zu ergänzenden Abklärungen zurückzuweisen. Die IV-Stelle Schwyz schliesst auf Abweisung der Beschwerde, während das Bundesamt für Sozialversicherungen auf eine Vernehmlassung verzichtet.