应以不孝为诫，不要担心被猜疑。刘臻是书生，鼓摇脣舌，只能诳骗殿下，愿殿下不要采纳。’杨勇不高兴，他日对刘臻说：‘你为什么泄漏消息，使柳肃知道，令他当面折辱我？’从此柳肃之言都不被采纳。”隋炀帝说：“柳肃横遭除名，不是他的罪过。”召来柳肃守礼部侍郎，转任工部侍郎，非常受亲任。隋炀帝每次出征辽东，常委委任他留守涿郡。大业十一年（615年）卒，时年六十二岁。