Chen Youliang hadde opprinnelig slektsnavnet Xie 謝. Han kom fra fiskerbakgrunn, og fikk etter hvert arbeid som distriktsembedsmann.