有得到其兄长源赖朝的批准，便让后白河法皇任命其为和检非违使（俗称判官），擅自命令或惩处赖朝的御家人，最终引起赖朝不满。其后，赖朝派遣至义经处出任奉行的梶原景时，指控义经在讨伐平家后表现傲慢，导致赖朝对义经的不满与日俱增。当义经得知自己惹怒赖朝后，他撰写起请文自辩道：「一直以来擅作主张的举动，就算现在急忙解释也是于事无补」、「我是初次听说您对我不满，就此要我辩解实在是无法原谅」，义经的话语最终反而让赖朝怒不可遏。坛之浦之战结束后，义经和俘虏平宗盛等人从京都抵达鎌仓，可是赖朝拒绝让义经进入鎌仓，义经在折返京