Sachverhalt: Sachverhalt: A. Der 1948 geborene D._ meldete sich am 24. September 2001 unter Hinweis auf eine seit dem 12. Januar 2001 bestehende rechtsseitige Fazialislähmung zum Leistungsbezug bei der Invalidenversicherung an. Mit Verfügung vom 25. Juni 2003 lehnte die IV-Stelle Nidwalden das Gesuch um Zusprechung einer Invalidenrente mangels rentenbegründender Erwerbsunfähigkeit (bei einem Invaliditätsgrad von 0 %) ab. Sie stützte sich dabei auf ein Gutachten der Beruflichen Abklärungsstelle (BEFAS) Stiftung X._ vom 25. April 2003. Auf Einsprache hin hielt die IV-Stelle an ihrem Standpunkt fest (Einspracheentscheid vom 3. November 2003). A. Der 1948 geborene D._ meldete sich am 24. September 2001 unter Hinweis auf eine seit dem 12. Januar 2001 bestehende rechtsseitige Fazialislähmung zum Leistungsbezug bei der Invalidenversicherung an. Mit Verfügung vom 25. Juni 2003 lehnte die IV-Stelle Nidwalden das Gesuch um Zusprechung einer Invalidenrente mangels rentenbegründender Erwerbsunfähigkeit (bei einem Invaliditätsgrad von 0 %) ab. Sie stützte sich dabei auf ein Gutachten der Beruflichen Abklärungsstelle (BEFAS) Stiftung X._ vom 25. April 2003. Auf Einsprache hin hielt die IV-Stelle an ihrem Standpunkt fest (Einspracheentscheid vom 3. November 2003). B. Die hiegegen erhobene Beschwerde wies das Versicherungsgericht des Kantons Nidwalden mit Entscheid vom 28. April 2004 ab. B. Die hiegegen erhobene Beschwerde wies das Versicherungsgericht des Kantons Nidwalden mit Entscheid vom 28. April 2004 ab. C. D._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Rechtsbegehren, unter Aufhebung des vorinstanzlichen Entscheides und des Einspracheentscheides sei ihm eine ganze, eventualiter eine halbe Invalidenrente zuzusprechen; eventuell sei der Sachverhalt weiter abzuklären. Die IV-Stelle schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde, während das Bundesamt für Sozialversicherung auf eine Vernehmlassung verzichtet.