貌伟岸，更以博学才俊闻名。又擅长书法，尤其工于草书隶书。先在陈朝为官，任太学博士。隋朝大业初年。奉诏任秘书学士，又奉召与虞世南、庾自直等朝中文臣撰修《长洲玉镜》等书十畲部。其文学所作，隋帝看了后都很赞赏。书成后迁着作佐郎，以文翰待诏。后从隋帝东征辽东高丽，隋帝在海滨见到大海龟觉得很奇异，诏虞绰作铭文。虞绰完成后，隋帝览后称善，命有司勒刻于海岛上。凭度辽功，授予建节尉。因为一向与杨玄感友善，杨起兵反隋失败后，遭株连流徙。流徙途中脱逃，改名换姓作吴章（《隋书》中作吴章，《北史》中作吴卓），在信安隐匿了一