，中书令裴炎反对，中宗不满，对裴炎说：「朕是皇帝，就是把天下送给韦玄真，也无不可。」裴炎密告武太后 ( 武则天 ) ，太后借中宗君出戏言为由，废黜中宗为庐陵王（684年），迁于房州（今湖北房县），韦氏随行。韦氏族人流放岭南，四个弟弟都被当地人杀死。后睿宗李旦即位，李显一家人在房州克勤克俭，生女李裹儿 ( 后来的安乐公主 )，因物资缺乏，在裹儿出生时，李显即时脱下上衣包裹为襁褓，故赐名裹儿。他们在房州历经睿宗禅位、武则天称帝、迁都洛阳等政局的变化，终于14年后（698年），武则天召李显回京，并重立为太子，