Data Engineer (Управление ассортиментом)

Наш департамент проектирует и создает data сервисы, которые помогают оптимизировать взаимодействие с клиентом или внутренние процессы компании.В связи с расширением команды проекта "Управление ассортиментом", ищем middle/senior специалиста на позицию Data Engineer.Команда создаёт аналитические продукты с целью оптимизации процессов управления заказом и распределением товара. Автоматизация мониторинга метрик.  Чем предстоит заниматься:  Разрабатывать, оптимизировать и поддерживать пайплайны обработки данных и машинного обучения; Реализовывать высокопроизводительные процедуры расчета витрин признаков; Сопровождать data science специалистов в продуктовых командах; Прорабатывать архитектуру разрабатываемых решений, предлагать идеи по оптимизации текущих процессов; Разрабатывать сервисы поверх ML моделей и алгоритмов для внедрения в prod.  Наш стек:  Для разработки: Python, Oracle PL/SQL, PostgreSQL, Spark, Spark Streaming, Impala/Hive, Kafka, Airflow, Flask/FastAPI, Redis; Для организации работы: Jira, Confluence, BitBucket.  Мы ждём от будущих коллег:  Высшее техническое образование; Опыт работы в качестве Data / ML Engineer или аналитика-разработчика; Опыт в создании высоконагруженных сервисов; Навыки написания сложных SQL запросов и их оптимизации; Опыт разработки и автоматизации пайплайнов обработки данных; Уверенное владение Python (структуры данных, пакеты для обработки данных); Способность работать самостоятельно, доводить начатое до конца. 

Технологии: airflow, apache hive, bitbucket, confluence, data engineer, data science, flask, jira, pl sql, postgresql, python, redis, spark streaming, sql