Может вы начали его холить и лелеять по принципу мамочки?  От этого он распустился. Вспоминайте какая вы были в начале замужества и попробуйте вернуться в то состояние. Вы - часть проблемы, поэтому с новым мужем история может повториться. Стоит проработать ошибки с этим мужем, и возможно у вас и отношения улучшаться снова.