1590年の小田原征伐で父が自刃し、後北条氏が滅亡すると、母方の姓を名乗り、遠山長右衛門と改名して黒田如水の家臣となる。
1590年小田原征伐时父亲自杀，后北条氏灭亡，便改随母姓称远山长右卫门，仕于黑田如水。