军数万人进入广西，10月首克庆远府。进入广西之后，因粮食短缺日益严重，部下思乡情切，石达开不愿自立一国、无法满足部下对高官厚禄的需求等原因，一些部下产生去意，适逢英王陈玉成致书石达开，邀其攻打湖南，配合安庆解围，石达开遂因势利导，于1860年命童容海、彭大顺等将率五、六万有意离去的部众攻打湖南，回应陈玉成所请，成为人数最多的一支脱离石达开部队，另有一些部队因内讧、退路被切断等原因脱离石达开。这些部队脱离石达开后，有些成功通过清军控制区返回天京一带会合太平军本部，有些则在半途被清军打散，并有多名将领死于内讧。