父亲北伐公孙渊，西抗诸葛亮，我不是武将家里的孩子，还能是甚么孩子呢？”这一番话说得武帝甚有惭色，因为胡芳父亲胡奋，北伐公孙渊，西抗诸葛亮（部下姜维）都是在司马懿麾下任职，反讽晋武帝五十步笑百步，自己也是出身武将之家。因胡芳入宫之后便甚为得宠，使得皇后杨艳对其非常厌恶，在临死前担心晋武帝会封胡贵嫔为皇后，更担心她一旦生下儿子势必威胁太子司马衷的地位，所以嘱託武帝一定要将其堂妹杨芷立为皇后，以绝晋武帝立胡芳为皇后的念头。