称职。邺城有人说：「才学表现依次为李浑、李绘、李纬，口才则为李绘、李纬、李浑。」高澄兼任吏部尚书，任用他为司徒谘议参军，说：「你能破格署任是因为你是人才，我才这样做。」不久加任征虏将军。南梁使者谢兰来访，李纬慰劳他。谢兰询问安平崔氏的近况，他说：「崔子玉之后，善于文辞的人已经没有了。」崔暹听到后很生气，李纬登门谢罪，崔暹立刻骑马不理睬他。他对人说：「虽然得失别人，但我一定会担任聘梁使。」武定五年（547年），李纬兼任散骑常侍出使南梁，他和两位兄长和姪子李湛都担任过和南梁交聘的使节和副使，被称为赵郡的四使