治年间（1555年—1557年），于备前的势力大大衰退。在这段时期，向尼子晴久数度请求支援，晴久亲自率领约3万余军势，撃破侵攻美作国的宗景，不过没能决定胜负。晴久在不久后急死，尼子氏势力衰退，因此陷入没有支援的情况。
战死.永禄元年（1558年），以足利义辉的仲裁，希望与毛利氏达成和睦。同年，为了自身复权，成功流放赤松晴政并令其子义祐继承家督。不过被追放的晴政亦投靠女婿兼城主赤松政秀，于是令龙野赤松氏成为独立势力，产生新的敌人。永禄6年（1563年），与对立超过10年的宗景