A partire dalla stagione 1973-1974 s'incrinò il rapporto con il presidente del Milan Albino Buticchi: l'allontanamento di Rocco, avvenuto nel corso del girone di ritorno, lasciò Rivera «"sconvolto"». La situazione si aggravò l'anno seguente, quando il giocatore si ribellò al proprietario, che aveva espresso il desiderio di cederlo al Torino in cambio di Claudio Sala, ed entrò in conflitto col nuovo allenatore Gustavo Giagnoni. Nel maggio 1975 Rivera arrivò ad annunciare il proprio ritiro dall'attività agonistica e poi addirittura a rilevare la società nel settembre successivo per interposta persona. Con Rocco nuovamente in panchina e una proprietà a lui congeniale, ritornò al calcio giocato nel novembre 1975.