弟兼家而推荐赖忠后死去。成为了关白左大臣的赖忠把女儿遵子嫁给圆融天皇作妃希望能生下男孩。但是先生下男孩的是对手兼家的女儿诠子。在下任天皇花山天皇的时候，由于花山天皇的外祖父伊尹已经死亡，所以赖忠继续兼任关白及太政大臣。但在皇太子被确定是怀仁亲王（之后的一条天皇），而他的外祖父正是觊觎关白职位已久的藤原兼家。于是赖忠提拔藤原义怀（伊尹的五男及花山天皇的叔父）想培植他为下一任关白。于是985年兼家策划花山天皇出家，让一条天皇继位，新天皇命兼家为摄政，而赖忠与义怀从此失势，赖忠虽然维持太政大臣的地位但是却有名