又属慕容氏；苻坚建立前秦，灭前燕，建元十八年（382年）赵郡为苻氏所有；慕容垂建立后燕，建兴十年（395年）赵郡复归慕容氏；慕容垂之子慕容宝立，拓跋珪夺并州（今山西太原市），包围中山，攻取常山诸郡，赵郡治所由房子移至平棘，遂归北魏。北魏时属殷州，东魏武定年间（543年至550年），赵郡有31899户，148314人，领县有平棘、房子、元氏、高邑、栾城（487年分平棘县置）5县，治所在平棘县。北齐代魏后，废房子、元氏、栾城3县，天保七年后赵郡只领平棘、高邑2县，治所未变。北周灭齐，赵郡其领县及治所仍未变。