Такой вариант, как у Вашего мужа - открытый брак при формальном разводе, а не развод в буквальном смысле. Ребенок может быть от кого угодно, но Вам нужно решить, подходит Вам такая жизнь "на долгие года", или лучше начать планировать собственного ребенка с кем-то другим.