А какой у вас выбор? Либо научиться с этим жить, либо уходить. Думаю, что надо учиться жить - потому что муж от вас никуда не денется. Это точно. Вы тоже от него деваться не хотите. Так что... идите к психологу, думайте сами... и учитесь с этим жить.