中书仆射牢梁、少府五鹿充宗结为党友，诸附倚者皆得宠位。（《汉书·佞幸传》）元帝建昭元年癸未(公元前38年)朱云与五鹿充宗辩《易》，五鹿充宗善梁氏《易》，朱云曾从白子友受《易》，元帝令诸儒考诸家《易》之异同。五鹿充宗乘贵口辨。诸儒莫敢与抗。皆称疾不会。有荐朱云能说易者。云摄齐升堂。抗辞而请。音动左右。既论。连折充宗。诸儒为之语曰。五鹿岳岳。朱云折其角。由是为博士。(《资治通鉴》系此事于永光元年。)汉成帝即位后，石显失势，五鹿充宗也因此被贬为玄菟太守，牢梁则被免官。