I desember 1983 ble Kyvik og en kamerat igjen arrestert, denne gangen for et våpentyveri i Sandvika av 13 rifler og 6 hagler. I 1987 skal Kyvik ifølge NTB/Klassekampen ha vært i slåsskamp med demonstranter utenfor USAs ambassade, og han opptrådte senere som livvakt for Arne Myrdal.