если вы боитесь, то и не уходите. поменяйте конструктивно ваши отношения, вспомните то, что вас раньше объединяло, постарайтесь привнести что-то новое и т.д. Не зря же говорят- старый друг, лучше новых двух! Разрушить проще, чем востановить или новые отношения завязать. займитесь пока реконструкцией. семьи в основном не на страстях и любви держутся, а на взаимопонимании, помощи, трепетности. от добра добра не ищут. Возможно у вас наклюнутся какие-то отношения на горизонте позже, тогда и уйдете, а может быть будет стараться наладить отношения с нынешним ужем и не захотите потом уходить  Попробуйте пожить для него, заботиться о нем, жалеть его как раньше, тем более что он вас любит- поезжайте куда-нибудь, проявите к нему нежность, ласку и все возможно будет еще даже лучше чем раньше. просто попробуйте.