En solo tres años perdió el 75% de sus miembros, cayendo en total de 16.773 militantes en 1932 a 4.392 en 1935 mientras perdía adherentes hacia el Partido Laborista, el Partido Comunista y los trotskistas.