Şarkı, tüm dünyada yüksek liste başarıları göstermiş ve eleştirmenlerden olumlu notlar almıştır. "Entertainment Weekly" dergisinin "2007'nin En İyi 10 Şarkısı" listesinde bir numara ve "Rolling Stone"'un hazırladığı "2007'nin En İyi 100 Şarkısı" listesinde üç numara olmuştur. Ayrıca şarkıya, "Blender" dergisi tarafından "Yılın Şarkısı" unvanı verilmiştir. "Umbrella", 2008 Grammy Ödülleri'nde "En iyi Rap/Söylenen İşbirliği" dalında ödülü kazanmış ve "Yılın Kaydı" ve "Yılın Şarkısı" dallarında ödüllere aday gösterilmiştir.