また、文和2年(1353年)6月、文和4年(1355年)1月にも異母兄の直冬や山名時氏らの攻勢により、一時的に京都を奪われている。