Вот как-то боязно в таких ситуациях что-то конкретное советовать. Но по сути тут важнее всего вам определиться чего хотите лично вы. И совсем необязательно какие-то резкие телодвижения предпринимать вот прям сейчас. Не стала бы агитировать вас мириться-и всё прощать, но и активно выгонять мужа вас тоже агитировать не буду. Тут важнее всего, ИМХО, внутренне успокоится и сделать для себя некие выводы относительно ситуации в целом и относительно данного человека. А в быту, с ребёнком вы на него можете положиться, в каких-то вопросах для вас он может поддержку оказать, есть какие-то практические плюсы в том, что он на данный момент рядом ?