Ну так вариантов 2, или выгонять или жить с ним. Если хотите  жить с ним, то значит прощаетет полностью, всей душой. И принять его таким какой он есть!А тогда нужно быть хорошей женой. А если выгоняете то выгоняете полностью. То что сейчас это все равно что рубить хвост частями - сейчас половину хвоста отрубить потом еще половину.