反攻备前守护代浦上村宗失败，并在大永元年（1521年）9月被杀。为了对抗山名氏侵攻而一时间与村宗联手，不过在去除山名氏威胁后，双方再次相争，一时间从居城被流放，并被迫前往美作避难。享禄4年（1531年），在拥立与细川晴元对立的管领细川高国的村宗侵攻摄津国时，以村宗的后阵参战，不过秘密向足利义维送出人质并约定倒戈。6月4日，在布阵，并成为晴元方的内应，攻撃高国、村宗军的背后。受到两面挟击的高国、村宗军溃败，村宗战死，高国亦被迫自杀（大物崩）。由此回复一定程度的实权，不过在此后，继续与村宗的儿子政宗和宗