土方歲三
弘化4年（1847年）時、源三郎進入當時位於多摩正在擴張的天然理心流劍術第三代宗家・近藤周助的道場。後他也在土方歲三的姐夫佐藤彦五郎為了天然理心流出外練習所設的道場中與土方一起練習劍術。源三郎與近藤勇是師兄弟，所以兩人在這段時期有著親密的往來和友情。