Тогда это останется проблемой вашего сына, т.к. он отец и обязан заниматься ребенком также, как его жена. Если мать ребенка уехала (на что имеет полное право), с ним остается отец. Если отцу тоже куда-то надо в это же время - это ЕГО проблема, а не его жены.