1984 hatte Pavoni eine schwächere Saison, bei den Olympischen Spielen in Los Angeles schied er über 100 Meter im Vorlauf aus; in der Staffel kam er nicht zum Einsatz. 1985 versuchte sich Pavoni im 400-Meter-Lauf und siegte auf dieser Strecke bei den Italienischen Meisterschaften. Im Jahr darauf trat Pavoni bei den Europameisterschaften 1986 in Stuttgart im 200-Meter-Lauf an, schied aber im Halbfinale aus. Mit der Staffel belegte er den fünften Platz.