Все эмоции тут понятны. Но вы правильно делаете, что не препятствуете общению с отцом. Единственное, не загоняйте себя в угол своей ревностью, попытайтесь взглянуть на все с другой стороны. В конце концов, у вас высвобождается какое-то время, которое вы можете посвятить только себе, на что угодно, без оглядки на детей.