Рёле планировал принять участие в летних Олимпийских играх 1980 года, однако Германия бойкотировала те Игры в Москве. В 1982 году Петер Рёле выиграл свою первую значимую международную награду, став бронзовым призёром чемпионата мира в эквадорском городе Гуаякиль. В 1984 году Рёле принял участие в своих вторых летних Олимпийских играх. Игры в Лос-Анджелесе бойкотировали страны Восточного блока, в числе которых были сильные сборные СССР и Венгрии. В итоге сборная ФРГ заняла третье место, уступив только главным фаворитам Игр сборным Югославии и США.