Sachverhalt: A. Der 1963 geborene A._ bezog ab 1. März 2003 eine ganze Rente der Invalidenversicherung. Mit Verfügung vom 7. Dezember 2011 setzte die IV-Stelle Uri diese Rente auf eine Viertelsrente herab, da sich der Gesundheitszustand des Versicherten soweit gebessert habe, dass der Invaliditätsgrad noch 42 % betrage. B. Gegen diese Verfügung erhob A._ Beschwerde beim Obergericht des Kantons Uri. Das kantonale Gericht holte daraufhin ein psychiatrisches Gerichtsgutachten ein. Das Gutachten wurde von Dr. med. B._, zertifizierter forensischer Psychiater SGFP, am 4. September 2013 erstattet. Der Experte beantwortete zudem am 14. März 2014 die vom kantonalen Gericht unterbreiteten Zusatzfragen. Daraufhin hiess das Obergericht des Kantons Uri die Beschwerde mit Entscheid vom 5. September 2014 gut und hob die angefochtene Verfügung mit der Feststellung auf, dass der Versicherte weiterhin Anspruch auf eine ganze Invalidenrente habe. C. Mit Beschwerde beantragt die IV-Stelle Uri, es sei unter Aufhebung des kantonalen Gerichtsentscheides ihre Verfügung vom 7. Dezember 2011 zu bestätigen. Während A._ auf Abweisung der Beschwerde schliesst, verzichtet das Bundesamt für Sozialversicherungen auf eine Vernehmlassung.