Как раз очевидно, кто инициатор. Вот и "советую" "как-то так" взять себя в руки и отдалиться, для чистоты картины. А если он просто кобелирует и ни о чем глобально не думает, желая лишь поволочиться за вкусной особью,  на стороне, проверить, "тварь он дрожащая, или право имеет", так пусть не попадается жене, пока его не отпустит, и не морочит вам голову. И нефиг детьми прикрываться, это уже переигрывание.