遺香庵には小川治兵衛が1931年に作した茶庭(遺香庵庭園)があり、市の文化財として保存されている。