W reprezentacji RFN Frontzeck zadebiutował 12 września 1984 roku w przegranym 1:3 towarzyskim meczu z Argentyną. W 1992 roku został powołany do kadry na Mistrzostwa Europy. Zagrał na nich w pojedynku z Holandią (1:3), a reprezentacja Niemiec zakończyła turniej na 2. miejscu. W latach 1984–1992 w drużynie narodowej Frontzeck rozegrał 19 spotkań.