中国地方而参加山崎之战、贱岳之战期间，仍然负责据守该地，可见受秀吉深厚信赖。此后，在秀吉掌握最大权力时，正式成为鸟取城城主，领有5万石。在天正13年（1585年）的越中征伐、翌年的九州征伐中，亦跟随南条元续、龟井兹矩、荒木重坚、垣屋光成等军参战，在日向国高城撃退岛津家久军（根白坂之战）。九州征伐后，加增因幡、但马国内至约5万9百石知行，军役合共有5千3百5十人（『宫部文书』）。天正18年（1590年），参加小田原征伐。同年，把家督让予嫡子长房，不过只是在形式上退位，实际上没有隐居，继续政务上的活动。