В 1940 году был призван в армию, а когда началась война, его часть отправили на фронт. В первые недели войны Семен Грузберг под Смоленском вместе с тысячами красноармейцами попал в нацистский плен. Ему присвоили номер SU 24058.