派任驻中华民国特命全权公使。 期间曾与奉系军阀张作霖见过面。1925年1月20日，与苏联代表签署日苏基本条约，建立两国正常外交关系，本条约于同年5月20日登记在国际联盟条约集内。 1929年，解除中华民国公使职务。 1930年，调任大日本帝国驻法国特命全权公使。 1932年1月14日，就任犬养内阁外务大臣。 同年:6月 - 任贵族院勅任议员，加入立宪政友会。 1939年，立宪政友会分裂为革新同盟派与正统派，芳泽担任正统派的总裁代行委员。1940年11月26日， 派任荷属东印度经济谈判特命全权大使。