氏，时氏败走。贞治元年(1361年)，于赞岐白峰城之战中战胜投降南朝的同族细川清氏(前幕府管领)。清氏于此战死，遂后四国被平定。赖之被任命为四国摠管，从四位下右马头。贞元6年(1367年)，11月，义诠病重，便遣使赞州招赖之交代后事。义诠让幼君足利义满视赖之为父，不可违其教诲。又对赖之言：“如今我们二人共享一子(义满)，望能不懈保护。”赖之遵命，将军任其为武藏守。同年，12月7日义诠公薨。时义满公仅10岁。赖之尊先将军命令，敍任管领，专管政事。订立新制度，严禁奢华，例行俭约。起用贤臣，辞退奸佞。选用