以连葬礼也没有举行便将希义的遗体丢弃，最后由希义的师僧，土佐国的琳猷上人带走供养。文治元年（1185年）3月27日，上人在颈上挂上希义的鬓髪前往鎌仓与赖朝见面，赖朝不禁赞赏道：「上人所做的事，就好像让希义的魂魄再度探访一样。」另外，《平治物语》与《吾妻镜》对于希义死时的描述有分歧，按《平治物语》的说法，希义是赖朝举兵后遭到平家势力包围，他替父亲义朝举行法事后便自杀身亡。有些说法认为在治承4年，希义与纪伊国熊野等海上势力合作，曾经计划在南海道建立独自的反平家势力圈。赖朝对于希义的死悲愤莫名，在派遗