1876年(明治9年)4月19日に岩倉は、華族会館の館長となる。