Автор, мужчина может надуматься вернуться только после того, как вы его выгоните (опуская вопрос зачем он вам такой какой есть). Пока он считает, что вы ему подчиняетесь и он всегда может вернуться, когда захочет и  в гости заскочить, когда надумается, он никогда не вернется. Вам страшно, но на самом деле он уже ушел, так что вы просто боитесь себе признаться, что он не с вами. Но в реальности он не с вами. Я очень рада, что вы наконец хоть в сексе начали ему отказывать, но вам пора делать следующие шаги - менять замки, выставить все его вещи и обьявить, что это больше не его дом и вы не его жена. Подавать на алименты. Если на развод пока не хочется, можете еще потянуть с этим. Смотрите только, чтобы он долгов на ваше имя не набрал.