其墓志《大唐故袁州别驾薛府君墓志铭并序》中显示，在公主事败后，薛崇简随即被送出长安，出为蒲州（今山西永济）别驾，寻坐事谪居于溪州（今湖南龙山）数年，谪居中，其妻方城县主武氏（梁王武三思女）于开元十二年（724年）病逝于溪州；妻亡后不久，起复为袁州别驾，但因心情郁闷、怀才不遇，薛崇简在开元十二年（724年）九月二十三日2病逝于袁州官舍，十四年（726年）葬于黄山之原