Tom er den yngste av i en familie med svømmende søsken. Da den eldste søsteren Diane hadde svømmestipend ved Iowa-universitet, stemt inn på laget av de beste amatørene i USA (All-American). Broren Bill kvalifiserte seg for nasjonale svømmeturneringer mens han gikk på high school (videregående skole), og fikk så et fullt svømmestipend ved universitetet i Illinois. Alle tre søsknene har vært svømmetrenere på et eller annet tidspunkt.