Напиши текст вакансии для должности "Data engineer (Big Data)". Название компании: "МТС". Расположение: Москва. График работы: Полный день. Опыт работы: От 1 года до 3 лет. Ключевые навыки: 'Python', 'Hadoop', 'SQL', 'Hive', 'Spark'

Big Data в МТС место, где телеком данные превращаются в реально работающие IT-продукты. Мы создали и протестировали несколько десятков сервисов. Самые успешные из них уже стали частью экосистемы МТС. Например, МТС Маркетолог, рекомендации в KION (МТС ТВ), услуга “Кто звонит?” или Спам blacklist. Кого мы ищем?  Опыт работы с данными в одной из отраслей: телеком, интернет-компании, банки, страхование, ритейл Понимание моделей данных и принципов устройства хранилищ данных Хорошее знание SQL Опыт работы хотя бы с одной промышленной БД Знание стека Hadoop/Hive/Spark и опыт работы с большими объемами данных Знание одного из языков программирования: Python, Scala Навыки загрузки данных из неструктурированных источников (data exploration, data wrangling, data cleansing) Умение работать в Unix консоли, базовое понимание (как минимум умение читать) shell scripts Хорошее знание технического английского, навыки поиска информации  Что предстоит делать?  Feature engineering для Data Science задач, нормализация данных, сглаживание локальных экстремумов, создание прототипов для задач интеграции; Задачи по сбору данных, их очистке и исследованию качества данных; Сборка витрин в соответствии с бизнес-задачами и отраслевыми практиками; Создание прототипов, прогностических моделей и доказательств концепций.  Сейчас мы ищем Data инженеров на продукты:  ЕСАУЛ (единая система автоматизации управления аналитики); Цифровая модель города; Smart Rollout; Продукты Финтех; Скоринг МТС.  Что вы найдете в команде Big Data? Стек технологий:  данные храним в Hadoop, обрабатываем на Spark (Pyspark, Scala) и SQL разрабатываем на python3: R&amp;D делаем в Jupyter, продуктивизируем в PyCharm храним код в gitlab, регулярные процессы запускаем через Airflow управляем задачами через Jira и Confluence  Команда: в команде Data engineer сейчас 30 человек (во всей Big Data МТС более 300 человек). Все Data инженеры разработчики поделены на группы со своими лидами. Каждую неделю мы обмениваемся опытом на совместных синках. Data инженеры работают в продуктах со своей автономной командой, в которой есть все роли: аналитики, DS, разработчики, девопсы, менеджеры продукта. Условия: каждый месяц - аванс и зарплата, дважды в год - премия. ДМС + стоматология, корпоративная связь, специальные предложения от партнеров и друзей МТС, отпуск 31 день в год. Выдаем 16” MacBook Pro или Dell на выбор. Есть ли обучение?  Локальные и международные конференции, митапы. Корпоративный университет МТС и масштабная виртуальная библиотека. А ещё мы регулярно обмениваемся опытом на совместных синках с лидами экспертизы  Какой график? Гибкое начало рабочего дня в промежутке с 8 до 11. Есть возможность работать несколько дней вне офиса по договоренности с командой. Сколько этапов при отборе? Не более трех:  HR + первое тех. интервью с лидом направления; Собеседование с PO и командой, выбор кандидатом проекта