后来蔡谟迁太常，领祕书监。咸康四年（338年），成帝曾驾临前殿，遣使拜授王导为太傅、郗鉴为太尉以及庾亮为司空。将要奏乐时，门下上奏称不是祭祀䜩飨就没有奏乐的制度。问到太常时，蔡谟则认为临轩遣使的仪式都应有奏乐之事，于是自此以后临轩都会奏乐。后彭城王司马纮以乐贤堂有晋明帝手绘的佛像，该堂经历过苏峻之乱的大破坏仍然存在，建议作颂。但蔡谟进言说佛教是夷狄的风俗，不是传统制度。而且该图明帝只是闲来绘制的作品，从没听说过明帝好佛道。更称苏峻之乱时晋都陷落，该堂保存可説是神灵保护，但不是晋朝盛德的表示。于是认为由朝