Мне было бы неважно, есть любовница или нет. Сам факт, что муж на все выходные уходит куда-то, при наличии нескольких детей- уже заставил бы меня задуматься. Я всю неделю, допустим, с детьми дома, а тут еще и выходные без него? Что это за фокусы такие? Устал от семьи? Для меня это был бы звоночек- как обезопасить себя, как подстраховаться на случай, если вдруг все закончится разводом. Муж уже показал себя как неблагонадежный. И на месте автора я бы стала искать работу, изучать вопрос размена жилья. Пусть муж вернется , одумается и все останется как раньше. Только я бы уже не стала слепо надеяться на то,  что он будет обеспечивать как раньше и уйдет "с чемоданом". Это глупо.