身份前往大坂出征时，被原谅并以神户城附近的泽城为隐居所。天正11年（1583年），在羽柴秀吉令信孝切腹后，织田信雄的家老林与五郎成为神户城城主。之后令女儿（信孝的正室）嫁予与五郎的嫡子十藏，并令其继承神户氏，改名神户与五郎。此后，在神户与五郎等人被蒲生氏乡等羽柴军击败而逃到美浓后，自身投靠织田信包而逃到安浓津。在庆长5年10月26日（1600年12月1日）于当地死去。