唐門は聚楽第から大慈院に移築されたと伝えるが、1886年(明治19年)に明智門を南禅寺金地院に売却したことに伴い大徳寺方丈前に移築された.
唐門は