Ему пора менять жену. Я серьёзно.  Такой человек скорее всего,  не создан для того, чтобы перед ним постоянно мелькали одни и те же люди.Увы, но с возрастом его психи только усугубятся. Автор, создавайте подушку безопасности,  сворачивайте декрет, дальше только хуже будет.  Скоро начнёт руки распускать. Ещё вариант: любовница начала давить. Только не надо рассказывать,  что ему некогда.  Дурное дело нехитрое.