"не могу заботиться о нем" - и не в коем случае не надо начинать! Чем больше мужик вкладывается в мелкую заботу по быту, тем меньше у него потенциала смотреть на сторону. Не забывайте, что у него была привычка, наработанная годами. Привычка жить тут, а расслабляться там. Если вернуть прежний образ жизни, вернется и потребность в прежних привычках.