Слушайте, вы изначально неправильно начали строить свою семейную жизнь, но всем страдать-плохо, разруливайте. Когда я родила старшего, в семье наших родственников сложилась похожая на вашу ситуация. Правда там у дамы была не однушка давно, дорогая тачка и работа в аппарате президента. Она изначально никаким ребенком заниматься не собиралась. Доход более, чем приличный. С рождения с ребенком были няня и муж(там хороший такой муж, но не зажигает). К 2 годам ребенка все пришли к выводу, что иногда приходящая мама, дающая деньги всем выгоднее и спокойнее. Так и растят девочку папа, бабушка и няня. С мамой они дружат, мама не испытывает негатива и на судьбу не ропщет. Зачем мучать себя, ребенка, отца ребенка? Поговорите с мужем спокойно, вполне возможно, что вместе вы найдёте выход.