Kun liittoutuneiden maihinnousujoukot rantautuivat Ranskaan kesäkuussa 1944, Sperrleä vaadittiin tekemään sata ilmaiskua vihollisen maihinnousujoukkoja vastaan. Lännestä oli kuitenkin siirretty kalustoa ja miehiä itärintamalle. Luftwaffe joutui taistelemaan vähällä materiaalilla ja miehistöllä vihollisen invaasio-osastoa vastaan. Sperrle ei kyennyt vastustamaan vihollisten ilmaoperaatioita eikä myöskään häiritsemään sen maajoukkoja. Elokuussa 1944 hänet siirrettiin odottamaan komentajuutta ilmavoimien Führer-reserviin. Hän ei saanut enää komentajuuksia sodan aikana.