この地には元禄期の豪商・紀伊國屋文左衛門の屋敷があったと伝えられる。