Вы себя уже перекрутили. Скажите мужу, что этот вопрос закрыт, что ваш ребенок никуда и ни к кому жить не поедет и закройте тему. Ваш муж просто не является действующим отцом, вот ему и пофиг, где его  ребенок живет, он все равно его мало растит. Но это ваш выбор мужа и отца ребенка. А свекры - их дело спросить, ваше дело отказать. Чего себя заводить-то?