当时印度僧人达摩从海路到达广州，在广州城外珠江北岸（今下九路一带）登岸后建起西来庵。后经历唐、宋、元、明等朝代，虽灯火不绝，但已破旧不堪。至清朝顺治十二年（1655年），从福建漳州至此的临济宗三十二代法裔宗符禅师，重建寺院，将西来庵改名为华林禅寺。首建大雄宝殿，次建楼阁、堂庑、寮室、仓厨，其范围大致为现时的北起兴华大街，南至下九路，东靠新胜街，西邻毓桂坊，正门在长寿西路，占地近三万多平方米。康熙四十年（1701年）增建殿舍，殿内有七层高的舍利塔。道光二十九年（1849年）兴建五百罗汉堂，到咸丰元年（1851