А может стоит с сыном обсудить аккуратно? Мне так кажется, что когда сыну проживания хочется, то ребёнок в 10 лет и будет как-то об этом говорить, сетовать на то, что папа с нами не живёт, вопросы задавать, а не возмущаться тем, что папа как гостиницей пользуется вашим домом... И что именно нужно вам? Я так понимаю, что самое важное - это спокойствие сына, его интересы. Ради этого вы готовы на любой шаг. Ну а если себя от сына отделить? Вам именно этот мужчина не слишком ли много боли принёс, не слишком ли много претензий с его стороны, чтобы мечтать о возвращении совместного проживания?