往萨摩国，进行岛津家藏入地的改革（萨摩御仕置）。因为这些功劳，在文禄4年（1595年）加增大隅国3千石（后来移封至越前府中に）。幽斋与千利休等人一同是秀吉侧近的文化人，得到相当宠遇。忠兴（三斋）亦对茶道有很深造诣，并成为利休的高弟之一。另一方面，与德川家康亦有亲交，在庆长3年（1598年）秀吉死去后，开始接近家康。庆长5年（1600年）6月，忠兴为了参加家康的会津征伐，于是从丹后率领细川家的军势前往，幽斋与三男幸隆一同以不足5百士兵守备丹后田边城。7月，石田三成等人举兵讨伐家康，身在大坂的忠兴的妻子玉