Вообще-то это как-то подозрительно и отношение свекрови  и реакция мужа.Может они от вас что-то скрывают ?Нет ли детей у него от первой любви ? Или может свинкой подростком болел и мама знает, что не может быть у него детей ? Но не хочет, чтоб вы разводились .Вариантов масса, с мужем надо бы поговорить, объяснить свои чувства, озвучить желания, а не мучаться в неизвестности.