Jabarkan Pengusiran Yoshitsune dari Minamoto no Yoritomo

Pada bulan April 1185, Yoritomo menerima surat dari Kajiwara Kagetoki yang ditugaskan mendampingi Yoshitsune. Kagetoki menulis fitnah bahwa Yoshitsune berkali-kali menegaskan bahwa kesuksesan menghancurkan klan Taira adalah semata-mata berkat jasanya seorang diri. Pada bulan berikutnya (Mei 1185), Yoshitsune dan pasukannya sampai di Provinsi Sagami untuk mengantar pasangan bapak-anak Taira Munemori yang menjadi tawanan. Namun Yoshitsune tidak diizinkan memasuki kota Kamakura, dan hanya para tawanan yang diizinkan memasuki kota. Setelah bertemu dengan Munemori, Yoritomo tetap tidak mengizinkan Yoshitsune memasuki Kamakura. Pada 9 Juni 1185, Yoshitsune diperintahkan kembali ke Kyoto dengan membawa Taira no Shigehira dan bapak-anak Taira no Munemori. Yoshitsune sangat kecewa dan berpidato di hadapan pasukan, "Untuk semua yang dendam dengan Yoritomo, kau harus berpihak padaku." Pidato Yoshitsune disampaikan kepada Yoritomo yang langsung menyita semua wilayah kekuasaan adiknya.

Pada 4 Agustus 1185, Yoritomo memerintahkan Sasaki Sadatsuna untuk membunuh Yukiie yang berada di pihak Yoshinaka. Memasuki bulan September 1185, Yoritomo mengutus Kajiwara Kagesue untuk menyelidiki Yoshitsune yang sedang berada di Kyoto. Perintah membunuh Yukiie ditolak Yoshitsune yang sedang sakit kelelahan dan tidak ingin membunuh sesama klan Minamoto. Setelah mendengar kabar dari Kagetsue, Yoritomo menganggap Yoshitsune melawan perintah, dan mengutus Tosanobō Shōshun untuk menghabisinya. Sebaliknya, Yoshitsune sudah meminta mantan Kaisar Go-Shirakawa agar mengeluarkan mandat kaisar untuk membunuh Yoritomo.

Pada 17 Oktober 1185, Tosanobō Shōshun menyerbu kediaman Yoshitsune di Kyoto dengan membawa sekitar 60 prajurit berkuda. Penyerbuan gagal karena sudah ditunggu-tunggu Yoshitsune yang dibantu tambahan prajurit dari Yukiie. Tosanobō Shōshun ditawan dan mengaku bertindak atas perintah Yoritomo. Yoshitsune sekali lagi menemui mantan Kaisar Go-Shirakawa, dan setelah didesak mau mengeluarkan mandat untuk menyingkirkan kakaknya. Walaupun mengetahui dirinya sedang diincar, Yoritomo meneruskan persiapan upacara Hōyō untuk memperingati hari meninggalnya ayah Yoshitsune dan Yoritomo. Upacara tersebut membuat Yoshitsune tidak berhasil mengumpulkan pengikutnya, karena sebagian di antaranya menghadiri upacara di kediaman Yoritomo. Sebaliknya, Yoritomo yang berangkat dari Kamakura untuk menghabisi Yoshitsune. Ketika pasukan Yoritomo sudah menyeberangi Sungai Kisegawa di Provinsi Suruga pada 1 November 1185, Yoshitsune dan pasukannya melarikan diri dari Kyoto. Perintah penangkapan Yoshitsune dan Yukiie diumumkan ke seluruh provinsi. Pada 12 Mei 1185, Yukiie dibunuh setelah lokasi persembunyian di Provinsi Izumi terbongkar.

Pada 29 Juli tahun yang sama, Yoritomo memerintahkan pengikutnya untuk membunuh bayi laki-laki Shizuka Gozen dengan Yoshitsune. Pengikut Yoritomo membuang bayi Shizuka Gozen di Yuigaura, Kamakura. Pada waktu itu, Yoshitsune berhasil sampai di Provinsi Ōshū dan meminta perlindungan dari Fujiwara no Hidehira.