Ved folketingsvalget i 2011 ble partiets tilslutning halvert til 4,9 % av stemmene, noe som i stor grad ble årsaken til at Venstre og Det Konservative Folkeparti tapte regjeringsmakten. Etter greide Barfoed i liten grad å heve partiets velgertilslutning, men gjorde et forholdsvis sterkt valg til Europaparlamentet i mai 2014. Etter å ha håndplukket sin etterfølger, Søren Pape Poulsen, trakk Barfoed seg som politisk leder i august 2014. Poulsen var en populær borgermester i Viborg kommune, og inntok partiledelsen til tross for at han ikke var medlem av Folketinget. Poulsen overtok som partiformann under et ekstraordinært landsmøte i september. Ved folketingsvalget i 2015 fikk partiet sin historisk laveste oppslutning med 3,4 %, og gikk tilbake fra åtte til seks mandater. Søren Pape Poulsen ble valgt til Folketinget, og varslet at de konservative trolig ikke ville søke regjeringsmakt selv, men støtte en borgerlig regjering.