А детям сколько? Может пусть они напрягаются? Это же им папашка нужен. Так им  и сказать, как есть. Мол, вам нужен папаша - вот и общайтесь, развлекайте, договаривайтесь сами, а мне он ни для чего не надобен, так что я теперь "в стороне". И мужу это донести. Может просто пора избавляться от чувства вины? Вы не виноваты, что папаша обижается на детей, что его плохо развлекают. Не пытайтесь все решить за всех, перекладывайте уже ответственность на БМ и детей, это их отношения, а не ваши.