Какие бы ухудшения не были,  суд не присудит детей вашему мужу,  особенно если тот будет против.  Если оба родителя отказываются от детей,  они идут в детский дом,  не зависимо от того,  насколько снижаются условия.  Насильно в РФ детей не присуждают.