留岛通嘉以改建三岛神社为借口，增筑有着石垣与茶屋的栖凤楼（せいほうろう），包含藩主御殿庭园、栖凤楼庭园、清水御门庭园等，规格上已经接近城。明治时代开始后森藩随着废藩置县改编为森县，森阵屋则为森县厅。在森县与大分县合併后，森阵屋的建物以公所等用途使用至昭和初年。目前森阵屋的遗迹称为三岛公园，仅栖凤楼与庭园残存。栖凤楼为大分县的有形文化财，旧久留岛氏庭园附清水御门前庭则被指定为大分县的名胜。
栖凤楼.栖凤楼（せいほうろう），也被叫做红叶之御茶屋的楼阁形式茶屋，较真言宗的不退堂更加着