，柳奭贬到象州。659年，许敬宗诬陷长孙无忌与韩瑗、柳奭、褚遂良谋反。长孙无忌被逼自杀，褚遂良死于658年，这时除去了他的所有官职爵位。韩瑗、柳奭被命令处死。在命令下达以前，韩瑗已经死在振州。行刑官命人开棺验尸，之后返回长安。家产被籍没，家族子孙发配岭南之海南岛。705年，武则天死后，她的儿子唐中宗执行了她的遗命，赦免了褚遂良、韩瑗、柳奭和他们的家族。韩瑗娶长孙无忌族兄弟长孙诠的姐姐，有子韩纯臣。曾孙宣州司法袭颍川公韩希孟。韩希孟生楚州司马赠太子中允韩绎。韩绎生汴州封丘令韩憕。韩憕女韩统嫁湖州司