Im Laufe des Jahres 1813 verschlechterte sich seine militärische Lage (siehe Spanische Geschichte). Napoléon I. war spätestens nach der Niederlage in der Schlacht bei Vitoria bereit, den Krieg in Spanien dadurch zu beenden, dass er Spanien räumte und Ferdinand VII. wieder als spanischen König anerkannte. Infolge des Vertrags von Valençay vom 11. Dezember 1813 musste Joseph daher auf die Herrschaft über Spanien verzichten.