Автор, радуйтесь, если он сейчас от вас свалит. Ибо если начнутся хождения туда-сюда, вообще умом тронетесь. У моих знакомых была такая же ситуация, как у вас, только без кота. Мужчина "и нашим и вашим", и к жене ездил "к ребенку", не разводился, никого не знакомил, но и с любовницей "жил".  В результате он вернулся к жене, хотя у жены появился молодой человек, но так, вроде несерьезно. Она без раздумий приняла мужа обратно, с МЧ порвала, а через полгода  поняла, что муж ей нафик не нужен, а нужен тот  мужчина. Еще через год, наверное, они таки развелись, сейчас жена строит новые отношения, мужа давно не видела, но  к любовнице он не вернулся.