度流浪到京都，但在1568年左右听闻山中鹿之介与立原久纲拥立尼子胜久对抗毛利家后，便前往与他们会合。1573年9月脱离了支持尼子氏的大名山名氏，成为私都城城主。龟井兹矩早年试图再兴尼子氏，但由于毛利氏过于强大而失败了。而此时织田信长的势力崛起，窥伺中国地方，为了得到帮助，龟井兹矩决定率尼子氏余党臣服于织田信长。而织田信长也希望利用尼子氏的余党来对抗毛利氏，因此给予其支持。龟井兹矩遂投入正与毛利家交战的织田家部将羽柴秀吉帐下，转战播磨国。1578年上月城被毛利家攻陷，尼子氏灭亡。山中鹿之介与尼子胜久相