第2次山縣内閣が発足すると、憲政本党の最高幹部に属していたが、伊藤博文を訪問して義和団の乱以来のロシア帝国との関係を話し合って意気投合。