V reprezentácii debutoval 30. apríla 1980 v Košiciach proti Maďarsku (1:0). Na ME 1980 v Taliansku bol členom bronzového družstva, na šampionáte odchytal jeden zápas proti Grécku (3:1). Zúčastnil sa aj majstrovstiev sveta 1982 v Španielsku, stretnutie s Anglickom (0:2) bolo jeho posledným štartom v reprezentačnom drese, ktorý obliekol 15–krát. Na olympijských hrách 1980 v Moskve získal zlatú medailu, s Františkom Kunzom boli jediní Slováci v tíme . Seman odchytal na turnaji všetkých šesť stretnutí, v ktorých inkasoval len jeden gól, 366 minút si udržal čisté konto.