Davis brøt flere barrierer for borgerrettigheter og mangfold i løpet av sin karriere med Raiders. I 1963 skulle Raiders spille en sesongoppkjøringskamp i Mobile i Alabama. Som en protest mot Alabamas segregeringslover nektet Davis å spille en kamp der og krevde at kampen ble flyttet til Oakland. Han nektet også å la spillerne reise til byer for å spille kamper dersom fargede og hvite spillere måtte bo på forskjellige hoteller.