Partiet var fortsatt lite, stadig støttet de fleste arbeiderforeningene i Norge opp om partiet Venstre. Det store, Venstre-dominerte arbeidermøtet på Haram i 1888 avviste Knudsens forslag om progressiv skatt, men støttet hans krav om 10-timersdag. Da Holtermann Knudsen på Haram-møtet foreslo en statlig fattig- og alderskasse, fikk forslaget kun 3 stemmer. Partiarbeidet gikk tregt, og i 1889 foreslo en fagforening å nedlegge Arbeiderpartiet. I stedet slo partiet inn på en mer utpreget sosialistisk vei og ga opp tanken om å samle de mange Venstre-dominerte arbeiderforeningene i det nye partiet. Arbeiderne burde overta produksjonsmidlene og staten burde «ordne Produktionen». I 1889 vedtok det nye Arbeiderpartiet for første gang et sosialistisk program med Holtermann Knudsen som formann. Etter ett år overlot han også her roret til Carl Jeppesen.