Может вам перейти на другую форму брака? Гостевой например. Муж не будет вас так раздражать своим постоянным присутствием, в тоже время он будет приходить, когда будет нужен или когда у него на это будут настроения и силы. Для ребенка не будет такого резкого разрыва родителей - что папы раз и нет на постоянной основе. В то же время вы будете официально муж и жена, в случае необходимости в помощи (здоровье, финансы, ребенок и тд), всегда поддержите друг друга. Ну, а если такая форма приведет к окончательному разрыву, то тогда это уже будет плавным и неизбежным финалом отношений. А может, это поможет посмотреть на все под другим углом.