刘表意图染指交州，赖恭被派遣代替被手下区景杀害的张津为交州刺史。及后与同期到任的苍梧太守吴巨不和，被吴巨举兵逼走回到故乡零陵。
蜀汉为官.刘表死后遭曹操驱逐，所以投靠刘备，刘备拜赖恭为镇远将军。建安二十四年（219年），赖恭与诸葛亮一同上书汉献帝请封刘备为汉中王，刘备遂命赖恭为太常。建安二十五年（220年），曹丕篡汉，赖上书请刘备称帝，其后劝谏刘备出征东吴，刘备坚持出征，命其留守在西川。刘备死后与诸葛亮一同建议把刘备与昭烈皇后一同合葬。
《三国演义》中的