Tras las elecciones legislativas de 2004 abandonó el Ministerio de Justicia, y se incorporó de nuevo al Congreso de los Diputados, donde fue nombrado, por acuerdo unánime de la Mesa de la Cámara, Secretario General Adjunto.