经与源赖朝失和后，义经逃往陆奥国，投奔奥州豪族藤原泰衡。由于养父藤原范季曾藏匿过义经，范赖遭到了源赖朝的怀疑。得知被猜忌后，源范赖自请罢免官职。1189年，源赖朝亲自征讨奥州藤原氏，范赖也随军参战。1193年发生曾我兄弟复仇事件，范赖受到牵连，被幽禁在伊豆国的修禅寺直至死去。