更立皇后，皆心仪霍光的女儿成君。刘询于是下诏求微时故剑，大臣知其所指，请求立许婕妤为皇后。本始三年（前71年），皇后许平君被霍成君的母亲显毒死后，霍光将霍成君送入宫中，次年正式册为皇后。婚后帝后感情燕好，但一直没有生育。地节二年（前68年，或本始六年），霍光病逝。霍光旧部时任京兆尹赵广汉察觉到宣帝有打压霍家之意，亲率长安官吏同去霍光子博陆侯霍禹家，直突入其门，搜索其非法酿酒、非法屠宰的证据，砸坏了霍家的瓶罐，离去时还用斧噼了霍家的门关。霍成君闻讯对着对宣帝哭，宣帝同情，召问赵广汉。地节三年（