和黑旗军佔据着越南北部山区，设置关卡、向百姓征收税收，阮朝官府对此无可奈何。黄旗军与黑旗军发生争夺地盘，互相出兵攻击。阮朝以黄继炎为谅平宁太统督军务大臣，会同山西省军务赞襄尊室说一起前去讨伐。刘永福得知后向阮朝效忠，并协助阮朝攻打黄旗军。1872年，法国商人涂普义溯湄公河而上，前往中国云南贸易。对于这些法国商队，黄崇英给予放行。翌年，安邺大尉率法军突袭北圻，黄崇英派黄旗军前去带路，最终攻破了河内，是为北圻变故。1874年，清朝广西巡抚刘长佑派刘玉成、赵沃出兵越南，协助阮朝镇压黄旗军。翌年，赵沃连破底