4 месяца отношений  - это, конечно, маловато для того, чтобы и вы узнали мужчину и он к вам привык. Жена там хоть и бывшая, но уже имевшая с ним длительные отношения. Хотя подозреваю, что в вашей жизни он еще появится и не раз. Надо ли вам это... Решайте сами по ситуации.