东路安抚制置使赵葵罗致。嘉熙元年（1237年）被擢为池州驻扎御前某军统制。十月，蒙古兵犯安丰军，吕文德率军支援，突围入城，与知安丰军杜杲合力捍御，迫使蒙军撤退。二年（1238年）九月，蒙古兵围庐州，吕伏精兵于要害，蒙古兵不能进，遂退兵，累官至和州防御使。淳祐元年（1241年）三月，为淮南西路安抚副使兼知庐州事。三年（1243年）二月，特授福州观察使、侍卫亲军马军司副都指挥使，统率两淮军马。四年（1244年）五月，蒙古兵围寿春府，吕文德率军解围，诏赴枢密院禀议，发缗钱百万。同年六月，为淮南西路招抚使，兼知濠州