依照群臣提议立霍光之女霍成君为皇后，而是委婉地以寻故剑的名义表示要立自己的元配妻子许平君为皇后。霍光没有反对，但以许皇后父亲许广汉受过宫刑的缘故反对汉宣帝依照汉朝惯例封后父为列侯。霍光的继室霍显对女儿没有成为皇后不满，背着霍光趁许皇后生产的机会买通医生淳于衍毒死了许皇后。许皇后死后，宣帝追究医生责任，淳于衍下狱受审，显害怕而向霍光坦白了此事。霍光惊骇之余，想要追究显的责任，但最终还是碍于夫妻情分替她掩盖了过去。霍成君最终被立为后。地节二年（前68年）春三月庚午，霍光病重逝世，临终上书请分自己的两