Inoue vant en olympisk bronsemedalje under vinter-OL 1992 i Albertville. Han kom på tredjeplass på 500 meter i hurtigløp på skøyter, bak Uwe-Jens Mey fra Tyskland og Toshiyuki Kuroiwa fra Japan.