Aprovechando la pérdida de influencia y el desgaste de Séneca, en el año 58 Publio Sulio Rufo, un consejero del joven Nerón, llegó a acusarlo (absurdamente según Tácito) de acostarse con Agripina, con lo que dio origen a una campaña de desprestigio en la que el filósofo fue acusado de crímenes tan peregrinos como el de deplorar el tiránico régimen imperial, extravagancia en sus banquetes, hipocresía y adulación en sus escritos –fue en este momento cuando salió a la luz la carta al liberto Polibio–, usura, y, sobre todo, excesiva riqueza.