Я бы разрешила детям общаться с отцом, если бы обе стороны были согласны. В любом случае, какие-то бонусы от этого общения вы тоже получите (ну если только там не алкоголик или моральный урод. Просто упертость - все-таки не самое худшее качество, все мы не без недостатков). Элементарно, побольше денег будет давать или хотя бы иногда забирать детей на полдня, вам какой-никакой, но отдых. А вы можете с ним особо и не общаться - только по делу насчет детей.