祀的各级官员会在神乐署赁房居住，另一方面是神乐观中的道士种植花草、配制草药的技术在市民中口碑极好，人们纷纷到这里欣赏花木购买草药，当时神乐署中仅药铺就有保合堂、保龄堂、育生堂、广德堂、天德堂、瑞德堂等数家，久而久之神乐署便成为北京的一大庙会, 一直繁盛到清朝初叶。据清人《帝京岁时纪胜》的记载“"帝京午节入坛内神乐观前摸壁赌墅陈疏肴酌余酒喧唿于夕阳之下竟日忘归"”。清干隆年间由于神乐观游客过多疏于管理，甚至发生了游客翻墙进入天坛禁地的案件，引起干隆皇帝的不满，他将神乐观改为神乐署，遣散了神乐观原有的道士改