Data Engineer в команду CDO B2C

Команда CDO B2C в поиске Data engineer в сфере управления данными и data-продуктами.

Наша команда отвечает за управление всеми данными B2C сегмента клиентов Сбера. Мы уже трансформировали подход к управлению данными, построили единый слой детальных данных и продолжаем развивать его актуальность и полноту. Так же перед нами стоят амбициозные задачи построения единого слоя агрегатов и фичей B2C, реализация всего тракта поставки данных в RealTime и внедрения нового стека технологий, что позволит создать единую точку правды для упр. отчетности, моделей и фронтальных систем, а так же капитализировать данные за счет их многократного переиспользования.

Обязанности

• разрабатывать DWH/DataLake/LakeHouse
• организовывать поставки данных в RealTime/NRT/Batch
• проводить код-ревью других разработчиков
• оптимизировать ETL
• внедрять новые технологии/новые стеки в существующие решения
• повышать актуальность данных
• снижать latency доступа к данным
• разрабатывать и валидировать архитектуру данных

Требования

• наличие высшего технического образования
• знание SQL (join, CTE, оконные функции, фреймы и др.)
• опыт работы с Hadoop, Spark, Iceberg/Paimon, S3
• опыт работы с Kafka и другими брокерами
• опыт работы с оркестраторами (например, Airflow) и CI/CD
• навыки построения архитектуры данных (например, Data Vault, Инман, Кимбалл и др.) и кратной оптимизации ETL
• практическое знание python на уровне разработки ETL

будет преимуществом

• практическое знание java/scala
• опыт создания и защиты архитектуры данных
• опыт разработки solution-архитектуры data-продуктов

Условия

• офисный формат работы
• годовой бонус и ежегодный пересмотр
• расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
• корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
• офис на Кутузовской с зонами отдыха и спортзалом
• льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров.