I september 1981 gikk partiformann Benito Scocozza ut og erklærte partisamlingen for mislyktes. 50 medlemmer, hovedsakelig fra Århus ble ekskludert fra partiet, og i tiden etter mistet KAP nærmest halvparten av sine medlemmer i utmeldinger. De neste årene ble partiet preget av konstant nedgang, og i 1984 gikk Benito Scocozza av som partiformann.