祐的次男义益亡故，伊东军将桶平城烧毁后撤退。元龟3年（1572年）5月岛津贵久去世，伊东义祐联络肥后国的相良义阳，率伊东军3000多人联合入侵饭野地区岛津氏的加久藤城，但被岛津义弘率领300寡兵大败（木崎原之战）。包括伊东祐安、伊东祐信、落合兼置、米良重方等伊东家多名武将均阵亡。自此以后，真幸院攻略战受挫，伊东家势力大幅衰退。
伊东崩.天正4年（1576年）岛津家趁机陆续攻取伊东四十八城的高原城、小林城、须木城、三之山城、野首城及岩牟礼城。野尻城主福永祐友数次向义祐进谏，但义祐不