Так вы спросите? Как процесс происходит? Он приехал, вы мило ужинаете и идёте в супружескую кровать? Дело ведь тут уже не в нем, а вас. Вы ему это позволяете. Я понимаю если бы к детям, но вы пишите, что он и детей не всегда видит. Если что, я вам сочувствую и понимаю, что не все всегда просто решается. Но уже совсем себя ниже плинтуса не позволяйте опускать