En la temporada 2003-04, Diaby alternaba en el equipo sub-19 del Auxerre en la Copa Gambardella y en el equipo de reserva que jugaba en el Championnat de France Amateurs, cuarta división del fútbol francés.