Tanto la CNT como la FIJL rechazan participar en la iniciativa de la Agrupación, pero su aproximación al POUM (partido comunista antiestalinista), le acarrearía como consecuencia el que la sede de la Agrupación fuera clausurada y sus principales responsables encarcelados reiteradamente, aunque siempre por periodos breves.