Напиши текст вакансии для должности "Senior Hadoop DevOps". Название компании: "Самокат (ООО Умное пространство)". Расположение: Санкт-Петербург. График работы: Полный день. Опыт работы: От 1 года до 3 лет. Ключевые навыки: 

Позиция открыта в новом для Самоката инфраструктурном продуктовом стриме - Data Platform.Основная бизнес задача этого стрима это наведение порядка в наших данных, которых очень и очень много, потому что мы настоящая ритейл компания и для нас это критически важная бизнес задача. DataPlatform отвечает за интеграцию с источниками данных в Самокате, обработку и хранение данных, а также служит единой точкой входа для потребителей данных.Целью DataPlatform является максимально эффективное решение бизнес-задач и оптимизация существующих бизнес-процессов на основе имеющихся в компании данных. Нам требуется Hadoop Devops, который будет заниматься как администрированием кластеров Hadoop, так и автоматизацией процессов сборки и доставки на различные окружения наших приложений, их запуском на кластере и обновлением.В зону ответственности Hadoop Devops также входит организация мониторинга наших приложений и задач выполняющихся на кластерах Hadoop.Как команда devops, в рамках DataPlatform мы строим полноценный процесс CI/CD для обработки данных, поэтому мы являемся частью команды разработки, а не обособленным отделом администрирования.От нашего будущего коллеги ждём любви к распределённым данным и к автоматизации всего и вся. А также стремлением докопаться до сути вещей. Чем будет входить в обязанности:  Разворачивание и администрирование кластеров Hadoop; Организация процессов CI/CD, yправление сборкой проектов, конфигурациями, деплоями, запуском задач на кластерах Hadoop; Реализация мониторинга; Поддержка и оптимизация сервисов.  Что мы ожидаем:  Опыт администрирования кластеров Hadoop (Hive, HDFS, YARN). Отлично, если есть опыт с vanilla hadoop; Опыт работы со Spark; Знание скриптовых языков (python, groovy, bash и т.д.); Уверенное знание Linux; Опыт работы с системами мониторинга (Zabbix); Опыт построения CI/CD с использованием Jenkins и Gitlab-CI; Опыт работы с Ansible; Знание инструментов сборки Java-продуктов (Maven, Gradle); Опыт работы с контейнеризацией (Docker и т.д.).  Будет преимуществом:  Опыт работы с Vertica, CLickHouse, Cassandra; Опыт работы с NoSql базами данных; Знание пакетных менеджеров (RPM, Deb); Опыт управления системой сбора логов: Kibana+ElasticSearch; Знакомство c ETL инструментарием для работы с данными экосистемы Hadoop; Опыт работы с Tomcat, Jetty; Базовые знания Java.  Что мы предлагаем:  Зарплата, которой вы достойны =). Мы не измеряем людей бюджетами и если мы решим, что нам будет интересно работать вместе, то мы 100% договоримся о деньгах. Соблюдение ТК РФ, выплаты заработной платы строго на карту банка. На время эпидемии находимся в удаленном режиме. После перейдем на частично офисный режим. Традиционные радости в виде кофе, фруктов и активной социальной жизни - присутствуют!) ДМС после испытательного срока. Возможность роста и развития внутри компании.