年时成为孤儿，学业和德行都很杰出，闻名于世。神䴥四年九月壬申（431年11月15日），北魏发起征士令征召崔绰、范阳卢玄、勃海高允、赵郡李灵等人做官，不久因为母亲年老坚决辞官，后来担任博陵郡功曹，去世。
身后.魏收完成《魏书》后，卢斐、李庶、王松年、卢潜都说《魏书》没有秉笔直书而争辩，卢斐等人就是因此才表示争辩，他们对杨愔说：“魏收诬陷毁谤一个朝代，按罪该杀。”卢思道也说：“元魏国史的记载特别不客观。”杨愔偏袒魏收，所以就报告齐文宣帝高洋，魏收也向齐文宣帝报告说：“臣得罪了强大的家族