柏尾馬之助
元治元年(1864年)に、新徴組が庄内藩預かりとなる。庄内藩の佐幕強硬派からの影響で、新徴組が次第に佐幕へと傾向を強めると、新徴組を脱隊した。
脱隊前より庄内藩穏健派や、幕府の元軍艦奉行で公武合体派の勝海舟、桶町千葉道場同期同門の海援隊・坂本龍馬らとも懇意であった上に、庄内藩改革派や公武合体派、攘夷派も剣の腕前や人柄を頼りに柏尾に接近、彼らに維新の志士として力を貸すこととなる。
幕府佐幕派や庄内藩保守強硬派に批判的な脱退だったこともあり、自身の身の上も危うい立場だったにもかかわらず、庄内藩穏健派や幕府穏健派、攘夷派の要人警護を行ったり、尊皇攘夷派、討幕派、勤皇派武士を匿ったりしている。
浪士組六番隊はこのように、後に幕末を賑す錚々たる人物が集まっている。
壬生村宿割では、柏尾・村上らは壬生村会所、芹沢・近藤らは八木家と分かれて宿をとっているが、この宿割りは直後の浪士組分裂時に大きな影響を及ぼすこととなった。幕府の意表を突く、清河の尊皇攘夷の上書が朝廷(学習院の朝廷急進派公卿)に受理され、朝廷の勅諚を受けた浪士組は、同年3月に京都を出立して江戸へ帰府する。
しかし同じ六番隊ではあるが、幕府への裏切りとも取れる清河の行動に反発した、近藤・芹沢ら主に八木家宿泊組と、根岸友山一派らは、壬生村に残ることとなり、袂を分かった。
壬生村に残った浪士組隊員は壬生浪士組を名乗り、後に新撰組となっている(根岸友山は近藤など天然理心流一派による粛清が始まると、壬生浪士組を離脱し新徴組に合流している)。
同年4月、清河がすでに攘夷強硬派の急先鋒としていた浪士組を、尊王・倒幕運動の切札に使うと危惧した幕府は、佐々木只三郎ら刺客を差向け、麻布一ノ橋にて清河を暗殺した。前後して虎尾の会出身者は村上・石坂ら多くが捕縛され、浪士組は解体されることとなった。