James è figlio di Kurt Krumpholz, medaglia d'argento nei 200 stile libero ai Mondiali di nuoto del 1973.