652年，唐高宗再提升他为中书省的长官中书令。王皇后没有儿子，柳奭建议她收养高宗的庶长子李忠（刘宫人所生）为皇太子。王皇后向高宗皇帝提出，唐高宗同意，也得到了元老长孙无忌等人的支持。652年，高宗立李忠为太子。654年，王皇后失宠后，唐高宗开始宠爱武昭仪。由于王皇后不善于使妃嫔、宫女效忠于己，而武昭仪善于此道。柳奭和他的姐妹魏国夫人柳氏（王皇后母亲）也不被后宫礼遇。654年，柳奭不安，向唐高宗提出解除自己宰相职务的请求，唐高宗同意了，命他担任吏部尚书，罢相。655年，王皇后和她的母亲柳氏用巫蛊之术以