Position: Senior/Lead Data Engineer UK
Company: O2IT Recruitment
Category: Python
Experience: 5y

Наші продукти — це додатки та веб-сайти, через які користувачі мають можливість робити замовлення автомобіля, а водії їх отримувати; ми створюємо власну систему управління внутрішніми процесами (CRM), власний картографічний сервіс та власне рішення, що відповідає за інтеграцію з платіжними провайдерами.
Команда клієнта використовує найновіші технологічні рішення та методології: продукт побудовано на базі мікросервісної архітектури з використанням хмарних обчислень. Наші експерти постійно вдосконалюють процес розробки. Маючи багато власних, ми також відкриті до твоїх ідей.
Щоб мати змогу впливати на розвиток продукту ти маєш приєднатися до Data Science & Analytics Team, як Lead Data Engineer.

Що треба робити:
✔ написання proof of concept
✔ запровадження Big Data платформи у cloud
✔ оптимізація Big Data платформи та зменшення витрат на cloud
✔ тісна взаємодія з Solutions Architect та CTO по розвитку Big Data платформи
✔ розробка нового функціоналу
✔ розробка плану професійного розвитку колег

Цілі на півроку:
✔ разом з Solutions Architect провести аудит існуючого DWH
✔ розробити архітектуру Big Data платформи в AWS та узгодити її з Solutions Architect та VP of Engineering
✔ розробити proof of concept Big Data платформи в AWS
✔ оцінити витрати на AWS під навантаженням на платформу
✔ мігрувати існуючу платформу з on-premise до нової Big Data платформи

Тому тобі будуть потрібні досвід та знання:
✔ 5+ років досвіду як Data Engineer
✔ 3+ роки практичного досвіду роботи з даними в AWS
✔ знання принципів Data Lake та Distributed Data Mesh
✔ відмінне знання Python
✔ відмінне знання SQL (PostgreSQL)
✔ досвід роботи з Kafka
✔ досвід роботи з Amazon S3, Amazon Redshift, Amazon Athena
✔ знання формату Apache Parquet
✔ знання Git та Gitflow Workflow

Бажаний досвід, навчимо, якщо не знаєш або не вмієш:
✔ знання Flask
✔ досвід написання функцій AWS Lambda
✔ досвід роботи з Amazon Glue (Crawler, Data Catalog)
✔ досвід роботи з Apache Hive та Apache Presto
✔ досвід у Machine Learning (класифікація, регресія)
✔ досвід роботи з Kubeflow
✔ досвід роботи на проекті, де робота з даними велась в AWS
✔ досвід лідерства у команді з декількох Data інженерів

Ми піклуємось про твоє здоров’я та комфорт, тому пропонуємо:
✔ гнучкий графік
✔ можливість вибрати зручний формат співпраці (офіс/віддалено/міксований формат), тому ти маєш можливість працювати з будь-якого куточка України, й світу
✔ 10 робочих днів оплачуваних лікарняних на рік
✔ 20 робочих днів оплачуваних відпусток
✔ корпоративне медичне страхування
✔ програму корпоративного страхування від COVID-19

Свій розвиток ти можеш підтримувати через:
✔обмін знаннями серед команд (лекції, курси, програма менторства)
✔ корпоративну бібліотеку та підписку на Pluralsight
✔корпоративне навчання з англійської мови різних рівнів
✔ можливість відвідувати оплачувані семінари, майстер-класи, тренінги та конференції; хакатони, форуми, team building sessions

Крім того, ми маємо для тебе:
✔ різні соціальні бонуси та компенсації (допомога до народження дитини, додаткова відпустка у День Народження, вихідний за донорство та ін.)
✔ корпоративне дозвілля, спортивні секції (футбол, йога)

Якщо ти шукаєш амбіційну продуктову компанію, орієнтовану на розвиток та світову експансію, зацікавлений у використанні новітніх технологій та готовий далі підвищувати свою експертизу, приєднуйся до команди.