，朔方郡太守田飒、云中郡太守桥扈恐惧，反卢芳投降光武帝刘秀。东汉大司马吴汉、骠骑大将军杜茂数次讨伐卢芳，没有成功。建武十二年（36年），卢芳进攻云中郡，留守九原的部将随育胁迫卢芳降伏光武帝，卢芳放弃军队，逃往匈奴。建武十六年（40年），卢芳入居代郡高柳县，以闵堪之兄闵林为使者，向光武帝表示投降。光武帝封卢芳为代王，闵堪为代相，闵林为代国太傅，卢芳负责汉朝与匈奴修好的事务。建武十七年（41年），卢芳入朝，在向洛阳途中，光武帝下诏命卢芳延期至明年（建武十八年）入朝。卢芳疑心皇帝猜忌，在代地再反汉朝，与闵堪、