治安3年(1023年)次男の経輔を右中弁に昇任させる代わりに中納言を辞退する。