，清朝放弃对越南的宗主权，将清军撤回镇南关内。张之洞命令刘永福撤离越南、驻防思州和钦州，但遭到刘永福的拒绝。唐景崧危词胁之，刘永福才被迫率黑旗军两千人撤离越南回国。但仍有一千名黑旗军官兵拒绝回国，由梁三奇率领，滞留越南北部继续与法国对抗。1891年（光绪十七年）在钦州营建公馆，命名为“三宣堂”，以纪念刘永福援越抗法的光荣历史
归国后.刘永福归国后，回到广东，被授予南澳镇总兵职务。清廷对黑旗军颇为猜忌，不断削减黑旗军人数、减少武装实力，最后只剩下三四百名老兵跟随刘永福，其余全部遣