Автор! он пытается с вами объясниться. Это значит, что он понимает , что вам плохо, ценит вас и хочет найти с вами общий путь. Попробуйте постепенно узнать у него, что его заводит в этих отношениях. И параллельно я бы советовала вам для лучшего понимания его и может себя, прочитать книжку Брэнди Энглер "мужчины на моей кушетке" . Там есть примеры похожие на Ваш случай  мне кажется. Другой вопрос, что в ряде случаев этот вопрос вдвоем без помощи хорошего психотерапевта-сексолога  не решить или не решить с таким категоричным настроем, который был у вас.Поэтому читайте, думайте, старайтесь его понять и услышать, а потом будете решать. И да, открытие второго дна в человеке, с которым жил столько лет, всегда вызывает ощущение ирреальности происходящего при одновременной жуткой душевной боли. Но то, что вы пишите о муже, показывает, что он вас любит и дорожит Вами. Поэтому просто дайте ему шанс объясниться. А дальнейшую дорогу вы предложите или определите для вашей семьи сама.