希义有份协助，因此向其发出追讨令。希义本来拜托了协助其逃亡，但是被平重盛莲池家纲和平田俊远动悉先机，在年越山（现高知县南国市一带）奇袭并且成功杀死希义。由于人们畏惧平家，所以连葬礼也没有举行便将希义的遗体丢弃，最后由希义的师僧，土佐国的琳猷上人带走供养。文治元年（1185年）3月27日，上人在颈上挂上希义的鬓髪前往鎌仓与赖朝见面，赖朝不禁赞赏道：「上人所做的事，就好像让希义的魂魄再度探访一样。」另外，《平治物语》与《吾妻镜》对于希义死时的描述有分歧，按《平治物语》的说法，希义是赖朝举兵后遭到平家势力包围