不过仅仅七年之后，第三任恒山王刘朝即在铲除吕氏的过程中被杀，国废为郡，同时又为了刚刚登基的新帝汉文帝刘恒避讳而改称常山郡，且范围扩大，北至恒山南至逢山长谷一带。汉武帝元鼎四年（前113年），封常山宪王刘舜之子刘平为真定王，割常山郡治所真定县及附近数县置真定国。东汉建武二年（26年），光武帝封西汉真定王刘杨之子刘得为真定王。建武十三年（37年），贬真定王刘得为真定侯，真定国併入常山郡。
魏晋南北朝时期.三国时期，常山郡西南分置乐平郡，元氏县归属赵国，范围进一步缩小，郡治迁移回汉初