"мой муж изменил бы мне только если бы меня разлюбил, то есть перестал бы меня любить как женщину,"  -здесь Вы ошибаетесь.  У мужчин измена может быть не связана с любовью, а также он может любить (искренне и сильно) двоих, троих... Во втором случае название этому чувству "полигамность". Он будет продолжать Вас любить и хотеть каждый день как женщину, при этом другую женщину тоже может так же сильно любить и хотеть. С этим его чувством что делать? Вот в таком варианте измены встает вопрос, нужно ли разводиться. В первом варианте (сунул-вынул по случаю) тоже нет смысла в разводе. Описанная Вами теоретическая ситуация (полюбил другую, вас не любит и не хочет как женщину) действительно заставляет задуматься о разводе.