Наверняка это произошло не в одночасье, обычно к этому ведется все несколько месяцев, а то и лет. Съезжайте к маме, так жить невозможно. Уж если стал открыто заявлять и гнать, то надо забыть этого человека, несмотря на то что он был когда то мужем и отцом вашего ребенка.