Строительство велось с участием заключённых и трудармейцев из числа репрессированных народов, в том числе немцев Поволжья, крымских татар, болгар, греков, военнопленных из Румынии. В декабре 1943 года на 311 вольнонаёмных строителей приходилось 3687 заключённых и трудармейцев, в июле 1944 года на строительстве работало уже 12 тысяч заключённых, трудармейцев и военнопленных. Большинство строителей городка жило в землянках на 200 человек каждая, имелась столовая на 2000 человек, обслуживавшая строителей посменно. Так как строительство нефтеперерабатывающего завода было оплачено по программе ленд-лиза, то на строительстве Жилгородка также постоянно присутствовали американские специалисты.