Я бы при таких обстоятельствах рассталась. Когда уже жена знает, а он только комментирует, ничего хорошего не получится. Он как телок. Кто перетянет, только он может так всю жизнь мотаться от одной к другой, а вы за него бороться будете. Но это мое мнение, основанное на личном опыте, а так только Вам решать.