В неправильном ключе мыслите.Для вас или все или ничего. Так не бывает. Если допускаете разрыв отношений - продолжайте дальше.Если для вас важны эти отношения и отец для вашего ребенка маленького - то пересмотрите свой подход и свою оценку поведения вашего супруга.