Syversen ble i 2009 valgt til parlamentarisk nestleder for KrF. Syversen var også fra 2009 til 2011 leder for foreningen Israels venner på Stortinget. Han overtok som parlamentarisk leder i forbindelse med at Dagfinn Høybråten gikk av som partileder våren 2011. Den nye partilederen Knut Arild Hareide begrunnet valget av Syversen til å lede stortingsgruppa med at Hareide selv ønsket å bruke kreftene sine i den nye rollen som partileder, og i tillegg at han ønsket å fortsette som leder av Transport- og kommunikasjonskomiteen.