Значит, все дело в нем. Неспроста женщины от него уходят. А с вами он тоже может быть потому, что хочет семейного счастья, а не потому, что любит. К психологу сходите, может маленько вправить вам мозги. Но если вы четко понимаете, что не любите и не хотите быть с ним, то нет смысла тратить деньги и время. Соберите волю в кулак и уходите. Один он не останется.