部有三个来源：一是源于南宋初年康王大元帅府的宋高宗嫡系御营军，如张俊、韩世忠、刘光世所部，岳飞最早也属这个系统，但因为上书被罢职而离开此军投入张所的军中；二是源于宗泽的东京留守司军，这是岳飞离开王彦后加入的、和金军战斗最多的部队，是岳家军的来源；三是源于吴玠的陕西军，吴玠一军原本没有名号，在这次整编中才得到了行营右护军的名号，被列入正规军。岳飞和吴玠二人都不是嫡系，是纯粹靠军功起家的将领，其部队是行营护军中的主力，尽管人数较少，但战斗力最强。参知政事李邴曾对宋高宗说：「陛下即位之初，韩世忠、刘光世、张俊威名