Я еще раз повторю - сделайте как пишет Фиилинг. Отступите немного "назад". Если бы вы описали, что мало видитесь, у него нет на вас времени, не общаетесь втроем с ребенком..и на этом фоне он вам так ответил, тогда можно было бы переживать и расставаться. Но у вас другая ситуация и вы сейчас - если начнете дожимать и демонстрировать свое плохое настроение по этому поводу - на самом деле все испортите.