六角氏頼
しかし、高師直が殺害された後も両派の対立が再燃、双方から味方に誘われ窮地に陥り、6月25日に出家して崇永と名乗り、近江守護を辞任して家督も長男の義信に譲った。この後、近江守護に弟の山内信詮・直綱や義信が選ばれたり、道誉が尊氏の嫡男の義詮から佐々木氏の惣領格に任命されている。
正平9年/文和3年(1354年)には政界復帰し、義信に代わって近江守護に復したほか、正平23年/応安元年(1368年)には禅律方・引付頭人も務めている。近江守護再任後は禅宗に帰依し、正平16年/康安元年(1361年)に寂室元光を招いて永源寺の開基となった。
しかし、家督は正平20年/貞治4年1365年に嫡男の義信が17歳で夭折、京極氏から道誉の孫で嫡男の高経を猶子に迎え後見を務めた。
正平25年/応安3年(1370年)6月7日、45歳で死去。近江守護は高経が引き継いだが、氏頼晩年に生まれた亀寿丸が元服して六角満高となると、近江守を解かれて京極家に戻された。