Lopulta Drillo luotsasi Norjaa karsintojen loppuun asti ja allekirjoitti marraskuussa jatkosopimuksen, joka kattaa EM2012-karsinnat. Drillon johdolla Norja on pelannut hyvin EM-karsinnoissa ja taistelee tosissaan kisapaikasta. Elokuussa 2011 Norjan jalkapalloliitto jatkoi veteraanivalmentajansa sopimusta vuoden 2013 loppuun saakka. Olsenin oli alun perin tarkoitus jättää tehtävänsä 2012 Ståle Solbakkenille, mutta tämän mentyä 1. FC Kölnin valmentajaksi päätti liitto jatkaa yhteistyötä Olsenin kanssa. Norja pelasi MM2014-karsinnoissa samassa alkulohkossa Slovenian, Albanian, Kyproksen, Islannin ja Sveitsin kanssa. Norja aloitti karsinnat shokkitappiolla Islannille ja haparointi jatkui muun muassa kotitappiolla ja tasapelillä Albaniaa vastaan. Kovat odotukset helpohkossa alkulohkossa vaihtuivat pettymyksiin ja lopulta Norjan liitto erotti Olsenin kaksi kierrosta ennen karsintojen loppua. Olsenin viimeiseksi otteluksi jäi 0–2 kotitappio Sveitsille. Tuloksen myötä Norja putosi lohkonsa neljänneksi ja oli kaksi pistettä kakkospaikalla majaillutta Islantia jäljessä.