Вам будет на что жить без него, у вас будут ваши деньги и плюс алименты. Лучше конура, чем жить так как вы живете и уже свыклись с этим. К тому же он когда-то может и уйти. Как вы жить будете и на что, если уйдет? Квартиру как я поняла вам не оставит, будете также делить.  Зря уверяете себя что он только гуляет и так будет всегда. Найдется какая-нибудь, кто перетащит его, это вопрос времени.