Никуда не ездить с двумя младшими детьми. Раз в месяц приезжать к мужу в гости или он к вам. Отпуска опять же, детей на каникулы к нему отправлять можно. Я бы так поступила. И не надо говорить, что муж загуляет, ну загуляет и загуляет, неужели взрослого многодетного отца ещё мне надо пасти.