Напиши текст вакансии для должности "Python/ Scala разработчик". Название компании: "Лига Цифровой Экономики". Расположение: Санкт-Петербург. График работы: Полный день. Опыт работы: От 3 до 6 лет. Ключевые навыки: 'Python', 'Bash', 'Linux', 'SCALA'

Приглашаем разработчика Python/ Scala в команду. Проект связан с работой в хранилище данных Hadoop одного из крупнейших банков страны. Спектр задач - от организации интеграций целевого хранилища с новыми источниками, до миграции\реплизации данных и создания витрин данных под решение конкретных задач бизнеса. Твои задачи:  Реализация интеграций в гетерогенной среде с помощью Python/Spark; ETL; Применение моделей в Openshift; Работа с Airflow, написание кастомных операторов, формирование дагов; Контейнеризация процессов загрузки/выгрузки данных; Оптимизация существующего кода; Базовые знания работы Kerberos; Развертывание, поддержка, внедрение DevOps инструментов; Разработка и поддержка платформы исполнения моделей.    Мы ждем от тебя:  ​​​​​​Опыт реализации интеграции в гетерогенных средах; Понимание и опыт работы со средствами экосистемы технологий Hadoop; Знание Python/Scala(Spark); Знание Apache Airflow; Знание Apache Kafka; Знание Docker; Опыт решения ETL/data engineering задач; Опыт развертывания Linux серверов/ контейнеров, скриптовых языков (Bash); Разработка микросервисов для внутренних инфраструктурных задач