In maglia biancoceleste, però, non entusiasmò come previsto; nonostante il secondo posto che la squadra ottenne al termine del campionato 1936-37, Riccardi nelle due stagioni successive subì la concorrenza di un altro centrocampista, Marchini, e venne utilizzato in misura minore dall'allenatore József Viola. Nel 1939 passò al Liguria di Adolfo Baloncieri, ma la stagione dei biancocerchiati, iniziata con l'abbandono dell'allenatore in contrasto con la dirigenza, si chiuse con la retrocessione. Riccardi passò dunque prima al , in Serie B, con cui sfiorò la promozione in A nella stagione 1940-41, e poi al Verona, in C, prima di chiudere la carriera.