Имя при рождении — Чжан Чжихэ. Родители Томокадзу Харимото родились в Китае и играли в настольный теннис на профессиональном уровне, его отец Ю был членом юношеской сборной Китая по настольному теннису, а мать Линь приняла участие в чемпионате мира 1995 года в составе сборной Китая. В 1998 году, за пять лет до рождения сына, они переехали в Японию, чтобы заниматься тренерской работой.