La chute de DSK à la suite de l'affaire du Sofitel est un coup dur pour Ramzi Khiroun. Depuis 2011, ayant pris ses distances avec DSK, il cherche en effet à intégrer l'entourage d'Arnaud Lagardère et se rend peu à peu indispensable. Il se lie avec certains barons du groupe, notamment Jean-Pierre Elkabbach, jusqu'à réussir à être décoré de la Légion d'honneur en même temps que le journaliste d'Europe 1. Il se heurte aussi à de fortes oppositions, notamment celle de Dominique d'Hinnin, le directeur financier du groupe Lagardère, et obtient son éviction.