Для того, чтобы сидеть, болтать было не обязательно. Достаточно было, например, работать в книжной лавке и продавать книги, внезапно оказавшиеся запрещенными. А вообще, забавная у вас логика - по лагерям, мол, только дураки сидели. Болтали, самивиноваты. А умные все по России маршировали. Нехотя.