Det ble etter hvert klart at problemet lå i Ueland og Sverdrups uenigheter om dannelsen av partier. Likevel var de i stand til å arbeide samlet som et parti da de jobbet for å få inn juryordningen i straffesaker. I 1854 satte Stortinget ned en kommisjon som skulle se på juryloven. Regjeringen mente at den hadde ansvaret for å nedsette kommisjoner. Den la press på Sverdrup og Ueland ved å sette deres stillinger opp mot deres innsats på Stortinget. Ueland ble nektet permisjon som lensmann, og Sverdrup ble satt under tiltale fordi han hadde forlatt sitt sakførerdistrikt. Ueland mistet jobben, mens Sverdrup ble frikjent.