У 1927 році Пантелей відійшов від справ місцевої влади, повністю зосередившись на власному господарстві. Здавалося, що його повстанське минуле залишилося позаду. Однак багато що змінилося в 1928 році, коли більшовицька влада знову вдалася до у селян як колишньої території РПАУ, так і всієї України. Ці конфіскації були передвісником Голодомора, коли під гаслом "суцільної колективізації" уряд СРСР здійснив геноцид, що забрав мільйони життів в Україні в 1932-1933 роках. За даними ОГПУ, Пантелей Білочуб перейшов до активного опору режиму, і спільно зі своїм товаришем по махновському руху, Абрамом Єфремовичем Будановим, став готувати збройне повстання. Білочуб і Буданов створили невеликий загін із десяти чоловік, збирали зброю і боєприпаси. Буданов, працюючи в Маріуполі на металургійному заводі, готував нелегальну публікацію листівок, адресованих промисловим робітникам і селянам.