Han var den yngre halvbroren til keiserinne Wei Zifu og dermed også keiser Wu av Hans svoger. Han var også onkelen til den berømte generalen Huo Qubing.