因为反对唐高宗立武昭仪为皇后，被派到西域为官。662年，他在抵抗西突厥部落入侵时阵亡，他的哥哥来恒之后也被任命为宰相。
生平.他的父亲来护儿曾是隋朝的大将、荣国公。610年，来济出生于江都（今江苏省扬州市）。618年，隋炀帝被将军宇文化及在政变中杀死。宇文化及杀死了很多忠于隋朝的大臣，包括来护儿，几乎全家灭门，只有来济和他哥哥来恒因为年纪太小而逃过一劫。在整个家族遭逢毁灭性的劫难后，历经流离艰险，兄弟两人皆笃志好学，又有文词，善于谈论，尤晓时务。在唐朝时，皆举进士及第。