Очень много мужчин, которые так поступают. Его все устраивает: и тут дают, и там принимают. Разве плохо? Возможно, есть еще причины, по которым он от вас еще не ушел: некуда уходить (вы же говорите, там, у женщины, муж был), возможно, с вами устраивает быт или еще что.