К доктору. ИМХО Само не рассосется ведь. А Вы и дети живете с ним, как Вы и сказали.Я почем у спросила то? Потому что если бы он дурил, сорри, так исключительно с Вами, то это было бы еще не так явно - что проблемы у него с головой, а не  в отношениях. Но уж если он и вне дома такой, то ясен пень - не контролируемо это и оч серьезно. Так что к доктору, повторюсь.