А вы мужу озвучивали свою позицию, без эмоций. трезво, с расчетами? Как я понимаю, даже если он возьмет на себя все заботы о детях и доме и будет отдавать вам  100% дохода от аренды своей квартиры, вас этот вариант не устроит? По объективным причинам, кредитное бремя и отсутствие нормального семейного отпуска это плохо. Он то что говорит в ответ? Сидел и буду сидеть на диване? А если дти заболели, он прямо берет и отводит их к бабушке, а потом возвращается обратно на свой диван?