闯入后白河法皇居住的法住寺殿发起强诉，因而被流放到了伊豆国。由于伊豆国是渡边党庇护人源赖政的知行国，文觉在那里得到了照顾，被近藤国高安排在奈古屋寺住下。他与同在伊豆国的前兵卫佐源赖朝交情甚好，并竭力劝说源赖朝起兵，复兴源氏。源赖朝推翻平家政权、建立镰仓幕府之后，文觉成为了幕府中的重要人物。他在源赖朝和后白河法皇的支持下，相继复兴了神护寺、东寺、高野山大塔、东大寺、江之岛弁财天等佛教建筑。在源赖朝大肆搜捕平家落人的时候，他为平维盛的遗孤平六代（平高清）求情，将六代收为徒弟并带到神护寺保护起来。源赖朝死