町三二三位于台北植物园荷花池旁，为日治时期昭和年间所建根据当时的地籍资料记载之地址为「台北州台北市南门町六丁目三二三番地」。之后国民政府时期用来当作林业试验所的宿舍，近年由台北植物园筹备邀请设计师郭中端、堀込宪二及日本庭园家小口基实建设仿旧的日式建筑及枯山水庭园，一瞥昔日家居一隅。
开放时间.週三至週日上午9点30分至下午4点30分免费参观，週一、週二及国定假期休馆