Data engineer (Рекламная платформа)

Работодатель:
Опыт работы:
От 3 до 6 лет

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя!

Мы ищем Data engineer в команду развития специализированных витрин данных.

Обязанности

Чем предстоит заниматься:

  • разрабатывать и поддерживать витрины данных в облачной экосистеме
  • проектировать и улучшать архитектуру системы
  • разрабатывать и оптимизировать пайплайны обработки данных/ETL на Python / Scala, а также помогать другим командам
  • внедрять контроль качества данных (SODA).

Требования

  • высшее образование
  • опыт в аналогичной роли от 3 лет
  • понимание принципов модели распределенных вычислений
  • опыт в поиске, обработке и построении витрин данных при помощи Spark и SQL
  • опыт промышленной разработки на стеке Scala/Java/Python
  • знание и опыт использования инструментов по обработке больших данных (Spark, Trino, Polars и др.)
  • опыт работы со стримингом (Flink, Spark Streaming, Kafka и др.)
  • хорошие знания SQL, опыт работы с одной из реляционной БД - Oracle/PostgreSQL/mySQL/MS SQL Server
  • опыт работы с S3, HDFS
  • знание любого оркестратора (AirFlow/Oozie/Dagster/Argo Workflows)
  • понимание подходов к организации разработки (CI/CD, DevOps).

Будет плюсом:

  • опыт работы с Iceberg
  • опыт работы с DataHub/OpenMetaData
  • опыт работы с SODA/GreateExpectation
  • опыт работы с ClickHouse
  • опыт работы с Kubernetes
  • навыки работы с генеративными AI-моделями
  • опыт создания AI-агентов и использования их в работе будет преимуществом -опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов
  • инструментальное владение AI для анализа, генерации и автоматизации.

Условия

  • офис рядом с метро Маяковская
  • гибридный формат работы
  • годовой бонус и ежегодный пересмотр
  • расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
  • корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
  • 90 дней удаленной работы из любого региона РФ
  • льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.

Похожие вакансии

Инженер (отдел по созданию стартовых комплексов)
Ракетно-космическая корпорация Энергия

Образование высшее техническое. Опытный пользователь ПК. Навыки работы в AutoCad, ProEngineer, Solidworks.

Инженер-конструктор 1 категории (Отдел электромеханических и робототехнических агрегатов)
Ракетно-космическая корпорация Энергия

Высшее техническое образование. Уверенный пользователь MS Office. Знание AUTOCAD, ANSYS, Creo7, КОМПАС, НАНОКАД.

Инженер-электронщик / Пуско-наладчик
Star-Staff

Высшее техническое образование. Опыт аналогичной работы от 3 лет. Понимание цифровой и аналоговой схемотехники. Умение читать электрические схемы и отлаживать...

Инженер-конструктор 3 категории в отдел гидравлического оборудования
Туполев

Высшее профильное образование. Знание: Технические требования, предъявляемые к разрабатываемым конструкциям, методы их конструирования, принципы работы, условия монтажа и технической эксплуатации...

Инженер-конструктор 3 категории в отдел бортовых кабельных систем
Туполев

Высшее профильное образование и стаж работы в должности инженера-конструктора не менее 1 года. Знание современных требований к выпуску конструкторской...