明治39年(1906年)の退官後に貴族院勅撰議員となり茶話会に所属、翌年には男爵に叙せられると伊藤とも距離を置き始める.
明治39年(1906年)の退官後に貴族院勅撰議員となり