Syversen ble valgt inn på Stortinget første gang i 2005 og ble gjenvalgt i 2009 og 2013. Alle tre gangene ble han valgt inn på Oslos utjevningsmandat. Han nådde ikke opp ved stortingsvalget i 2017 og gikk ut av Stortinget. På Stortinget var han medlem av Finanskomiteen 2005–2017. Fra 2009 til 2011 var han KrFs medlem i Kontroll- og konstitusjonskomiteen.