С 1974 по 1981 год Ворм сыграл в 12 матчах второй сборной Германии, где забил 5 мячей. Однако, с 1975 по 1978 год Ворм играл и за основную сборную. В 1972 году Ворм принял участие в Летней Олимпиаде. В 1976 году Ворм играл за сборную на чемпионате Европы, где немцы взяли серебро, а в 1978 году он участвовал в чемпионате мира.