城于天正元年（1573年）8月被攻陷为止，立下许多战功。在这段时期，以秀吉的外甥（后来的丰臣秀次）为养子，不过实际上是人质，在浅井氏毁灭后，返还到秀吉之下。
秀吉家臣时期.此后，以与力的身份跟随秀吉，在天正5年（1577年）的中国征伐中，跟随秀吉的弟弟羽柴秀长攻略但马国，在秀长前往山阳方面时，代替秀长担任山阴方面全体的指挥。天正8年（1580年）期间，在讨伐山名氏后，成为但马丰冈城城主，领有2万石。在进攻鸟取城时，于最前线并与吉川元春的援军持续战斗。指挥在荒木村重离反时转仕秀吉的荒