2006年に図書館は近隣地へ文京区立本郷図書館として移転し、記念室は本郷図書館鴎外記念室となったが、遺品資料の保存環境改善のため2008年に改築が決まり、2012年に現在の建物が竣工・開館した。