臣服于大内义隆，义隆在天文12年（1543年）侵攻出云国，不过大败（第一次月山富田城之战），于是此时再次成为尼子氏家臣。武勇优秀，在忍原崩、降露坂之战等战事中相当活跃，被晴久任命为石见的最前线山吹城的城代。而且虽然是石见国人，仍然被提拔为尼子氏直臣。永禄4年（1561年），在晴久死去后，毛利元就向石见侵攻，晴久的嫡男义久单方面以云艺和议与毛利氏达成和睦，因此令支援反毛利军（福屋氏）的常光等石见尼子方武将动摇，最终令居城山吹城被毛利军包围，于是降伏。不过在永禄5年（1562年），因为武勇和性格而被毛利元就