《史记·汲郑列传》中记载汉武帝对卫青十分随便不拘礼，从而联想出他们中有男色关系。苏东坡也曾在《东坡志林·人物》中借此题发挥写过一篇文章嘲讽汉武帝和卫青。
家庭.注：根据班固在《汉书》卷十八外戚恩泽侯表第六中的记载，在征和二年的巫蛊之祸中，卫青的长子长平侯卫伉由于受巫蛊牵连，坐诛，但卫伉的子嗣以及卫青次子卫不疑与幼子卫登的家族并没有受牵连的记录。因此，在后来汉宣帝、汉成帝以及汉平帝时期，卫青的后人以皇帝诏复家。（汉宣帝）元康四年，诏赐青孙钱五十万，复家。（汉成帝）永始元年，青曾孙玄以