末期，元朝在松花江下游地区所设置的五个万户府中，仅剩下胡里改部、斡朵里、桃温部三个万户府。最初，斡朵里部居住在牡丹江流域，（当时称胡里改江），元末明初, 由于自然条件的影响，加之受“野人女真”的袭击，胡里改部和斡朵里部相继南迁。 南迁后长期居住在今图们江中下游到朝鲜半岛咸镜北道会宁市、茂山郡一代。明朝永乐十年左右，明朝与李氏朝鲜之间的女真酋长勐哥帖木儿（清肇祖）所部从建州卫中析出，另置建州左卫，以勐哥帖木儿为建州左卫指挥使。永乐四年（1406年），在女真胡里改部酋长阿哈出的推荐下，明朝政府授女真