代”来继承砂越氏。但是氏维却又以独立为目标而发起了内乱，反对在大宝寺氏支配下的出羽和来次氏的国人势力也开始活跃起来，晴时也因此被迫出面，开始镇压叛乱。此战过后，以大宝寺氏为首的物领制在晴时执政的时代已经有了很大程度的衰退。紧接着又于天文元年（1533年），居城大宝寺城又遭到了砂越氏维的攻击和放火，虽然说一度在越后上杉氏的中介下而短暂和睦，但是翌年又再度发生了争执。此时，因为流域发生了变化，因而居城失去了抵御天然灾害的能力，此外曾遭受过洪水灾害，因此晴时将居城搬到了更为坚固的。在大永年间，与砂越氏