I 1978 ble Peter etterfulgt av Graz' borgermester Alexander Götz som FPÖ-formann. Men han fortsatte å utøve makt i kulissene. Etter at SPÖ hadde tapt sin absolutte majoritet i 1983, fremforhandlet han med Bruno Kreisky den lille koalisjonen under kansler Fred Sinowatz og visekansler Norbert Steger. Tilbudet om å bli utnevnt til nasjonalrådspresident takket han nei til.