羽英二发表《天羽声明》，广田三原则被提出，蒋作宾负责与广田弘毅就两国间悬案进行交涉。蒋作宾执行的对日本妥协退让的路线遭到中国国内上下的反对。同年12月，为应对日本的侵略，国民政府改组，汪精卫卸任行政院长，蒋作宾被免去驻日本大使。归国后，他转任国民政府内政部部长。
晩年.1936年（民国25年）12月，蒋作宾作爲蒋介石的随从到西安。不久，张学良、杨虎城发动西安事变，蒋作宾被幽禁。事件解决后，他回到南京。1937年（民国26年）11月，他任安徽省政府主席，2个月后辞任。以后他曾历任中国