Значит так оно и есть, доверяйте себе и своим ощущениям. Может, муж Ваш и не хочет ребенка обижать, но ребенок это именно так и воспринимает. Береите все в свои руки и отдвигайте мужа на второй план в воспитании, по крайней мере на период адаптации ребенка к новым условиям жизни.