且辖县会随时间推移不断增加，因此太常郡有如一个“隐形郡”。西汉太常领县的制度不知起源于何时，至迟在汉武帝时已有。汉元帝永光三年（前41年）废除了陵县制。此后皇帝陵园不再单独置县，原有的九个陵县分别归三辅管理。汉文帝之母薄太后、汉昭帝之母赵婕妤也有陵县。汉高帝为其父太上皇之陵所置的万年县与汉宣帝为其父史皇孙之陵所置的奉明县是否也属太常管辖已不可考。后世效仿于此，中部县因黄帝陵而改名黄陵县，酃县因炎帝陵改名炎陵县。