高资问机关，谘问事项不限于律令案更涉及一般重要政策。废止笞刑、废止小学教师配戴武士刀、通过日台共学制度、台日通婚制、任用八田与一工程师修建嘉南大圳、促成时为皇太子的裕仁来台之巡礼仪式等。1923年9月辞总督职，因关东大地震而返日转任日本农商务大臣兼司法大臣。1925年任枢密顾问官。昭和5年（1930年）、于东京市玉川村（现在东京都世田谷区）上野毛自宅（万象阁）昏倒因脑出血及肺炎死亡。葬于多磨灵园。