Да, возвращались назад, вселялись к родственникам, вставали на очередь,  потом получали жилье. Но насколько я помню, в 80-х годах, время позднего СССР, просто так люди никуда не уезжали. Как правило "на хозяйстве" кто-то всегда оставался прописанным в квартире, бабушка, дочка... Или обменивали регион на регион. Так могло образоваться 2 квартиры на семью.