В последующем бригада под его командованием принимала участие в Мелитопольской, Никопольско-Криворожской и Крымской наступательных операциях. За отличия в последней дивизии было присвоено наименование Перекопская. По завершении боев в Крыму дивизия была выведена в резерв Ставки ВГК, в период со 2 мая по 4 июня 1944 года полковник Кобзев временно исполнял должность командира дивизии. В конце мая дивизия была передислоцирована на 3-й Белорусский фронт, где вошла в 5-й артиллерийский корпус прорыва РГК. С 5 июня 1944 года Кобзев вновь вступил в командование 4-й гвардейской легкой артиллерийской бригадой и воевал с ней до конца войны. Участвовал в Витебско-Оршанской, Минской и Вильнюсской наступательных операциях. В конце августа 1944 года бригада вместе с дивизией была подчинена 3-му Прибалтийскому фронту и в составе 1-й ударной армии принимала участие в Рижской наступательной операции. Затем дивизия вновь была переподчинена 3-му Белорусскому фронту и до конца декабря поддерживала соединения 11-й гвардейской армии при блокировании курляндской группировки противника. В январе – феврале 1945 года она участвовала в Восточно-Прусской наступательной операции. Во второй половине февраля дивизия вела боевые действия на 1-м Прибалтийском фронте, поддерживая соединения 11-й гвардейской, 39-й и 43-й армий в ходе ликвидации земландской группировки противника. Затем поддерживала войска 3-го Белорусского фронта при проведении Инстербургско-Кенигсбергской и Кенигсбергской наступательных операций. В начале мая бригада вместе с дивизией была подчинена 6-й гвардейской армии Ленинградского фронта и до конца войны вела бои с курляндской группировкой противника.