1900年(明治33年)に枢密顧問官、1909年(明治42年)に宮内大臣となる。