Мужчина никогда не будет уважать женщину, которая сама себя не уважает. Сейчас вы в его глазах пали очень низко. Он никогда не будет к вам относиться как раньше. Даже если ему эта девушка надоест, он пойдет за следующей потом. Вы ему сейчас выдали индульгенцию на блюдечке с красной каемочкой.  Единственный вариант такое терпеть - если без него вы с голоду с детьми ноги протянете. Иначе лучше гнать его, если финансово сможете разобраться или алименты он будет платить. Детей пусть берет и занимется,  он их папа навсегда. Подключите свою семью, если сами себя не можете защитить, пусть ставят ему мозг на место. Вы звучите как молодая неопытная женщина, запутавшаяся в что правильно-что нет, несамостоятельная. ИМХО, рано или поздно вы помудереетe, и пошлете своего непутевого мужа.