Shimōsa Province
Nach einer Überlieferung wurde das Grundstück in der Genroku-Zeit (1688–1703) von dem bekannten Großkaufmann Kinokuniya Bunzaemon genutzt, der mit Holzhandel reich geworden war, sein Vermögen aber dann verspielt hat. Sicher ist, dass der Daimyō von Sekiyado in der Provinz Shimousa, Kuze Teruyuki (; 1699–1749), im Jahr 1721 das Grundstück als Nebenresidenz anlegte. Aus der Zeit stammt die heutige Anlage in ihrer Grundform.