Data Engineer

Вакансия обусловлена большим портфелем проектов в сфере DATA, предусмотренным стратегией развития нашей компании и имеющим высокий приоритет для бизнеса. Развитие ДАТА-практики охватывает контур компании и ее ключевых партнеров по цепочке создания ценности и предусматривает внедрение корпоративной платформы данных, включая построение классического DWH и озера данных (Data Lake), разработку приложений BI-аналитики и отчетности на платформе, обеспечение процессов интеграции данных. Работа организована по продуктовым командам, в которые входят представители бизнеса и ИТ (продакты, дата-инженеры, специалисты Data Science, аналитики данных и специалисты ИТ, отвечающие за сервисы платформы данных). Обязанности:  Сбор и обработка данных из различных источников для проектов построения ML-моделей прогнозирования и ad-hoc аналитики по запросам бизнес-функций маркетинга, HR и финансов; Анализ требований ко входящим потокам данных; Проектирование потоков данных и схем загрузки; Профилирование и очистка данных; Разработка скриптов трансформации данных; Разработка интеграционного взаимодействия (REST API); Подготовка витрин данных и поставка данных для контента в аналитические приложения; Проведение ревью кода и участие в программе менторинга джуниор дата-инженеров команды.  Наши пожелания к знаниям и опыту:  Высшее образование Опыт работы в роли дата-инженера/ аналитика данных в продуктовых командах либо опыт участия в проектах построения DWH и Data Lake в роли ETL-разработчика – от 2 лет Твердые знания Python Навыки оптимизации SQL-запросов и опыт разработки на PostgreSQL, ClickHouse Опыт построения потоков данных (предпочтительно Ni-Fi, AirFlow) Практические навыки работы с данными на кластере Hadoop или S3 Опыт написания задач для Spark, Kafka Базовые навыки MLOps (в объеме самообслуживания) Предпочтителен опыт работы с Яндекс Облаком и/или Сбер Cloud Умение писать чистый поддерживаемый код и техническую документацию  Мы предлагаем:  Работа в масштабном бренде в сфере быстрого обслуживания с уникальной историей Достойный уровень оплаты труда Продвинутая система бенефитов (годовой бонус, ДМС, мобильная связь, частичная компенсация фитнеса) Гибридный график работы Профессиональное развитие и карьерный рост Возможность принять участие в цифровой трансформации масштабного бренда 

Технологии: ad hoc, airflow, api, data engineer, data lake, data science, etl, postgresql, python, rest api, sql