Takabayashi vant en olympisk sølvmedalje i baseball under Sommer-OL 1996 i Atlanta. Han var med på det japanske baseballslaget som kom på andreplass i baseballturneringen bak Cuba. Japan tapte finalen 9–13 til Cuba.