Инженер сопровождения (SDP Hadoop)

SberData - департамент по управлению данными всего Сбербанка. SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI.

SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных.

Первый этап отбора на эту вакансию – общение с AI-рекрутером. После отклика вам на почту и в чат на платформе HeadHunter придет приглашение пройти первичное интервью с ГигаРекрутером в Telegram. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры. ГигаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!

Задачи

• обеспечение бесперебойной работы платформы Hadoop в Сбере: установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры
• участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов
• автоматизация рутинных операций для повышения производительности и надежности систем
• анализ и оперативное устранение нештатных ситуаций, отказов приложений и исследование корневых причин их возникновения
• поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку
• создание эксплуатационной документации для сопровождаемых систем
• организация работ, взаимодействие со смежными командами, в части исправления выявленных недостатков
• контроль внесения изменений в промышленную среду.

Требования

• глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux
• понимание работы стека TCP/IP, опыт эксплуатации CI/CD систем: Jenkins/Github/TeamCity/etc
• опыт работы с системами мониторинга: Prometheus, Zabbix
• понимание технологий интеграции между системами - форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ)
• опыт автоматизации на скриптовых языках: shell/perl/python/etc
• опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP
• английский язык на уровне чтения технической документации
• опыт написания технической документации и технических заданий
• знание принципов работы реляционных БД и ITSM, ITIL
• высшее образование.

Будет плюсом:

• опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flink, Solr, Ranger
• навыки работы с генеративными AI-моделями.

Условия

• комфортный современный офис: БЦ Даниловский форт, рядом с М.Тульская, Верхние котлы
• график работы – офис
• ежегодный пересмотр зарплаты, годовая премия
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• подписка Прайм с возможностью совместного использования до трех близких
• вознаграждение за рекомендацию друзей в команду Сбера.