Position: Data Engineer
Company: МГУ
Category: Data Science
Experience: 1y

Функціональні обов’язки:
Побудова ефективних процесів конвеєрної обробки даних (Data Pipelines) Включає в себе: необхідність організувати збір даних з різних джерел, їх обробку, очищення, форматування і зберігання, настройку процесу оновлення даних і їх прийому системою, розгортання системи, тобто підготовку даних для подальшого аналізу дата саентістамі і дата аналітиками.
Фокус на роботу з даними, які зберігаються на серверах, знання фреймворків обробки стрімінгових даних.
Опис існуючої структури даних і системи, пропозиції щодо оптимізації.
Формування вимог щодо інфраструктури ІТ-відділу.
Взаємодія з розробниками, бізнес-аналітиками та командами з управління релізами і продуктам.

Вимоги до кандидатів:
Досвід роботи в ІТ від 3-х років.
Глибокі знання SQL і Python (написання скриптів для збору, обробки та підготовки даних), додатково - знання Java / Scala.
Добре розуміння принципів баз даних і структур: SQL (MS SQL) і NoSQL (знання особливостей використання і переваг нереляційних баз даних і досвід використання однієї з - MongoDB, Cassandra).
Знання та досвід роботи з інструментами зберігання і обробки великих даних (Apache Kafka, Hadoop, Apache Spark, Apache Cassandra).
Розуміння принципів розподілених систем зберігання даних, таких як HDFS5.
Досвід налаштування автоматичних дата Пайплайн в Apache Airflow.
Знання Git, Linux, Kubernetes, Docker.

Компенсаційний пакет:
Офіційне працевлаштування в стабільній компанії з повною відповідністю трудовому законодавству.
Своєчасна заробітна плата, виплата 2 рази на місяць.
Піклування про ваше здоров'я: медичне страхування та можливість застрахувати рідних.
Прозорі налагоджені процеси.
Корпоративний університет, можливості для навчання, доступ до корпоративної бібліотеки.
Знижки та пільги на заняття в спортклубі, курси англійської.
Цікаві проекти, можливості для самореалізації та професійного розвитку.