Le nom de Speer figure sur la liste des membres d'un gouvernement non-hitlérien rédigée par un groupe de conspirateurs cherchant à assassiner Hitler. Son nom est cependant accompagné d'un point d'interrogation et du commentaire « à convaincre », ce qui lui sauvera vraisemblablement la vie lors des larges purges qui ont suivi l'échec de l'attentat du . Cependant, suspect aux yeux des Gauleiter qui tiennent leur congrès annuel à Posen en août 1944, son discours de 2 heures se limite à un tableau exhaustif de la production de guerre du Reich ; en fait, lors de ce congrès, il ne rencontre pas l'adhésion du NSDAP, désormais soumis à l'influence grandissante de Bormann, de Goebbels et de Himmler.