Fils de Félix Pellerin et d’Yvonne Auger, il passe son enfance dans le milieu rural de la Mauricie. D’origine acadienne, l’ancêtre de Jean Pellerin a été victime du Grand Dérangement au milieu du et déporté dans la région de Boston, un passé que Jean Pellerin raconte dans un roman autobiographique à base historique sorti en 1988, "Gens sans terre".