Автор а вы то чего от него хотите? Если семьи и "отца", вашему сыну. То он сливается - и не держите его.  С вами все нормально , но он не видит возможности жить вместе, общаться с вашим ребенком итд. Возможно его не устраивает  вообще такой формат отношений - "мыжесемья", совместное проживание итд. Ему возможно просто нужна любовница. Или наоборот нужна жена/сожительница, но он почувствовал, что ваш ребенок его не примет и не намерен как то добиваться этого, в конце концов его можно понять, ему 50, сколько ему еще осталось активной полноценной жизни? В таком возрасте уже начинаешь ценить каждую минуту своего времени. И тратить его на "бодания" с подростком ему не хочется. Вы еще можете оставить этого мужчину как любовника. Тогда надо оградить его от своего сына, а сына от него. Т е никаких совместных времяпровождений. Не рассказывайте ему о сыне, спросит - отвечайте немногословно. Конечно можно похвастаться успехами сына, но не долго. И если уж совсем невтерпеж. Надо понимать, что ему ваш сын неинтересен. Ну где так же как вам его дети... А так нормальный у вас сын... И вы нормальная, что вы его слушаете? Это всего лишь его мнения. Мало ли у кого какое мнение, кроме того мнение такая вещь, вполне может поменяться.