由于是霍光所立，他吸取昌邑王被废的教训，初即位政事一决于光。唯立后问题上坚持己见，他与发妻许平君是贫贱之交、感情非同一般的深厚，当上皇帝后许平君并没有立即被立为皇后，而是仅封为婕妤。朝臣和上官皇太后都认为应立霍光的小女儿霍成君为皇后。于是汉宣帝“诏求微时故剑”，群臣见宣帝意思坚决，于是议决立许平君为皇后。霍光的夫人显对女儿没能当上皇后非常恼怒。本始三年时值皇后许平君有孕，霍光的夫人于是勾结女医生淳于衍将其暗杀。霍光知道后非常惊愕，但是他没有去追究自己的妻子罪行，而是利用自己的权势授意宣帝不追查此