Sachverhalt: Sachverhalt: A. Der 1945 geborene L._ führte als gelernter Bäcker-Konditor mit Zusatzausbildung als Weintechnologe und Handelsschulabschluss selbstständigerwerbend bis 31. März 2001 eine Weinkellerei. Am 22. Mai 1991 meldete er sich unter Hinweis auf eine beidseitige Lunatummalazie (Kienböck-Krankheit) und einen Sehfehler bei der Invalidenversicherung zum Leistungsbezug an. Wegen den Folgen der Beschwerden an den Handgelenken, welche versteift wurden, sprach ihm die IV-Kommission Schaffhausen am 2. Juli 1992 mit Wirkung ab 1. Mai 1991 - bei einem Invaliditätsgrad von 50 % - eine halbe Rente zu. Dies bestätigte sie in den darauffolgenden Jahren im Rahmen von Revisionsverfahren mehrfach, letztmals am 8. Mai 2002. Zusätzlich zu seiner am 1. Juni 2001 aufgenommenen Halbtagsstelle als Sekretär beim Institut X._ begann er am 10. Juni 2002 als Sekretär mit einem ebenfalls 50 %-igen Arbeitspensum bei der Z._ AG zu arbeiten. Aufgrund der veränderten erwerblichen Verhältnisse führte die IV-Stelle erneut ein Revisionsverfahren durch und verneinte bei einem errechneten Invaliditätsgrad von 14 % den weiteren Anspruch auf eine Rente (Verfügung vom 12. November 2002). A. Der 1945 geborene L._ führte als gelernter Bäcker-Konditor mit Zusatzausbildung als Weintechnologe und Handelsschulabschluss selbstständigerwerbend bis 31. März 2001 eine Weinkellerei. Am 22. Mai 1991 meldete er sich unter Hinweis auf eine beidseitige Lunatummalazie (Kienböck-Krankheit) und einen Sehfehler bei der Invalidenversicherung zum Leistungsbezug an. Wegen den Folgen der Beschwerden an den Handgelenken, welche versteift wurden, sprach ihm die IV-Kommission Schaffhausen am 2. Juli 1992 mit Wirkung ab 1. Mai 1991 - bei einem Invaliditätsgrad von 50 % - eine halbe Rente zu. Dies bestätigte sie in den darauffolgenden Jahren im Rahmen von Revisionsverfahren mehrfach, letztmals am 8. Mai 2002. Zusätzlich zu seiner am 1. Juni 2001 aufgenommenen Halbtagsstelle als Sekretär beim Institut X._ begann er am 10. Juni 2002 als Sekretär mit einem ebenfalls 50 %-igen Arbeitspensum bei der Z._ AG zu arbeiten. Aufgrund der veränderten erwerblichen Verhältnisse führte die IV-Stelle erneut ein Revisionsverfahren durch und verneinte bei einem errechneten Invaliditätsgrad von 14 % den weiteren Anspruch auf eine Rente (Verfügung vom 12. November 2002). B. Die hiegegen erhobene Beschwerde hiess das Obergericht des Kantons Schaffhausen mit Entscheid vom 5. September 2003 gut und wies die Sache an die Verwaltung zurück, damit diese im Sinne der Erwägungen verfahre und neu entscheide. Zur Begründung führte das Gericht im Wesentlichen an, die IV-Stelle habe dem Versicherten trotz der ärztlich geschätzten 50 %-igen Arbeitsunfähigkeit eine weitere Erwerbstätigkeit im Umfang von 50 % zugemutet, welche zur gesundheitlichen Überforderung und zur Kündigung durch die Z._ AG geführt habe. Da anhand der Aktenlage nicht hervorgehe, ob der Versicherte genügend eingegliedert sei, habe die IV-Stelle diesen entweder weiterhin einzugliedern, oder aufgrund einer 50 %-igen Arbeitsfähigkeit für leichte Arbeit einen neuen Einkommensvergleich vorzunehmen. C. Die IV-Stelle führt Verwaltungsgerichtsbeschwerde mit dem sinngemässen Rechtsbegehren, unter Aufhebung des vorinstanzlichen Entscheids sei die Verwaltungsverfügung vom 12. November 2002 zu bestätigen. Während der Versicherte auf Abweisung der Verwaltungsgerichtsbeschwerde schliessen lässt, verzichtet das Bundesamt für Sozialversicherung auf eine Vernehmlassung.