De menade i stället att riksdagsmännen , i enlighet med vallagen , var politiskt ansvariga endast inför väljarna .