Из солдат киевского Георгиевского полка, которые одиночными группами также перебрались из Киева на Дон полковник Кириенко сформировал батальон числом более 150-ти человек и участвовал с ним в обороне Ростовского района до ухода Добровольческой армии из Ростова 22 февраля 1918 года. 12 февраля 1918 года, по приказу генерала Корнилова, сформированный им Георгиевский полк в качестве 3-го батальона вошел в состав Корниловского полка. Полковник Кириенко не согласился с этим решением и был зачислен в «резерв чинов». Участвовал в Первом и Втором Кубанском походах. Во время Второго Кубанского похода был произведен в генерал-майоры. Занимал административные должности при штабе Добровольческой армии, а затем ВСЮР. С 10 июля 1919 года — исполняющий обязанности коменданта города Харькова. В Русской армии генерала Врангеля — комендант 1-го Армейского корпуса. Эвакуирован в ноябре 1920 года с армией в Галлиполи.