平家势力圈。赖朝对于希义的死悲愤莫名，在派遗大军消灭莲池和平田等人后，在介良庄建立墓地，并且以希义的法名「西养寺殿圆照大禅定门」来命名为西养寺。希义的死亡年份众说纷纭。
墓所.进入近世后，西养寺逐渐衰落，在明治时代因为废佛毁释而被废弃，现在只剩下遗迹。西养寺迹地内的无缝塔（高知市指定文化财）相传便是希义之墓。1995年，此墓与鎌仓的赖朝墓互换泥土和石头，让兄弟二人得已重聚。墓地上方亦建有祭祀希义的希义神社。另外在高知县高知市横滨东町也有同样是祭祀希义的圣神社。