А муж так и говорит, чтобы вы с детьми съезжали? Тут надо договариваться. По вашей ситуации дочку вам, сына оставить, раз он в вузе учится. У мужа спросить, как быть с детьми (они общие, вдруг он забыл, ответственность тоже общая), потом с детьми поговорить, они уже взрослые, чтобы понять, что происходит. Т.е. не решать всё одной, общаться, советоваться с участниками переселения, определиться по алиментам на дочь, по помощи сыну, если отец против его проживания в квартире. В общем, вы сейчас пытаетесь всё самостоятельно разрулить, но проблема общая, участвовать должны все, и ответственность за любые решения потом тоже будет общей, а не "это ты мама виновата".