人类，宾赐长老，收恤孤独，德厚侔天地，利泽施四海，宜为帝者太宗之庙”；廷尉尹忠等人认为武帝“改正朔，易服色，攘四夷，宜为世宗之庙”。最后汉元帝把高帝庙、文帝庙、武帝庙定为太祖、太宗、世宗庙，把太上皇庙、惠帝庙、景帝庙拆毁了，郡国所设的帝庙也都拆毁。汉成帝死后，关于汉武帝世宗庙应不应该亲尽而毁的问题也展开过争论，最后汉哀帝决定保留。汉平帝时期，按照王莽的意见，又把宣帝庙定为中宗庙，元帝庙定为高宗庙，“天子世世献祭”。西汉诸帝庙号至此确定下来。东汉时期还有一些变动，比如取消了元帝“高宗”、成帝“统宗”、平帝