Åtte år senere, under OL 1920 i Antwerpen forsvarte han sin olympiske tittel på 100 meter. Han var også med på det amerikanske laget som vant 4 x 200 meter fri. I OL 1924 i Paris kom han på andreplass på 100 meter fri bak Johnny Weissmuller og foran sin eldre bror Samuel Kahanamoku.