Cuando Minamoto no Yoritomo se proclamó shōgun en 1192 el poder de los Fujiwara comenzó a decaer y se dividieron en cinco familias a inicios del siglo XIII: Konoe, Takatsukasa, Kujō, Nijō e Ichijō.