Selv om det ikke var åpenbart da markerte Raiders’ nederlag i Super Bowl Davis’ siste høydepunkt. Raiders opplevde nedgangstider med seks tapende sesonger på rad mellom 2003 og 2009. Dette inkluderte syv sesonger på rad med tosifret antall nederlag. Laget gikk gjennom flere hovedtrenere. Spilleren laget draftet først i 2007, quarterback JaMarcus Russell, ble av Fox Sports beskrevet som «the biggest draft flop in NFL history». Davis fikk størsteparten av skylden, og tilhengere gjorde narr av mottoet hans «Just win, baby!» Russell ble kuttet i mai 2010 og endte opp med å aldri spille en down i NFL etter det.