Связь с отцом и не нужно разрушать, можно жить отдельно, но не препятствовать общению. Если Вы станете жить раздельно, он Вас хотя бы уважать со временем начнет. И то только в том случае, если Вы будете спокойно его встречать, когда он будет приходить к детям, а не истерить каждый раз. И дети будут Вас уважать. А сейчас что?