所以世木政久之子政亲便把姓氏改为世鬼。世鬼政亲有长男政栋、次男政时二子，据《萩藩阀閲録》所记载，世鬼政栋后来远走到尾张国，成为织田信秀的家臣，而世鬼政时在高桥家被毛利家消灭后，率领忍者众出仕毛利家，毛利家的忍者以世鬼众为中心派出二十五人分布领内各地，为毛利元就实行谋略和收集情报。后来世鬼政时的两个儿子政定、政矩也都做为忍者侍奉毛利元就，拥有三百石的领地，根据《阴徳太平记》纪录，世鬼政定曾奉毛利元就的命令伺机向其强敌出云国大名尼子晴久传递假情报，误导他错认其叔父新宫党首领尼子国久父子倒戈，而将尼子国久杀害