Suomen kommunistisen puolueen oppositiolla, jota 1970-luvun alussa alettiin kutsua taistolaisiksi, oli vankka asema Rauhanpuolustajissa. Ydin-lehdessä väitettiin vuonna 1984, ettei järjestön kymmenien palkkatoimitsijoiden joukkoon ollut koskaan kelpuutettu kuin "yksi ainoa ei-taistolainen". Järjestö vastusti pääsihteeri Mirjam Vire-Tuomisen johdolla NATO:n toimintaa, mutta ei kritisoinut Neuvostoliiton toimintaa. Rauhanpuolustajat antoi hyväksyntänsä esimerkiksi Tšekkoslovakian miehitykselle 1968. Vuonna 1990 järjestön varapuheenjohtaja Pekka Koskinen myönsi, että järjestön ongelmina olivat ainakin 1970- ja 80-luvuilla olleet "kaksinapainen käsitys maailmasta Yhdysvaltain ja Neuvostoliiton hallitsemana, poliittis-emotionaalinen sitoutuminen Neuvostoliittoon sekä osin opportunistinen sitoutuminen sisäpoliittiseen valtaan Suomessa." Monet puolueet pyrkivät hakemaan Rauhanpuolustajien kautta suhteita Neuvostoliittoon, muun muassa Keskustapuolue ja Demarinuoret kuuluivat järjestöön.