Да я знаю, что это болезненный процесс, но безболезненними такие разборки и не бывают.  Но на них надо идти, если вы не хотите либо надорваться, либо совсем уж превратиться в тяглобую лошадь. Да и дети же у вас, рано или поздно, но этот вопрос все равно придется решать. И да, идя на такой разговор, нужно понимать, что последствия могут быть разными. Но это, опять же,, вопрос, насколько вас достала ситуация.