，在主人不在时，独断地打开城门，并唿唤真田军入城，甚至被攻至二之丸。另外，与忠政的义兄名古屋山三郎的关系非常恶劣，因此亦对忠政优遇山三郎而感到不满，怠慢等，显露出对忠政的反感。因此，失去忠政的信赖，双方关系恶化。庆长8年（1603年），在森氏转封至美作国时，于建设新据点的地点上与忠政对立。结果，意见被忠政无视，忠政指示在院庄建设城池。通说指在此时，忠政命令山三郎诛杀宇右卫门。后日，在建设现场遇见山三郎，双方发生争执，被山三郎拔刀斩击，不过成功避开并反击斩杀山三郎。但是其他森家臣亦受忠政之命，于是被武艺优