Наша команда создает ключевой продукт для аналитики Сбера — Прикладную аналитическую платформу B2C. Мы помогаем сотням команд внутри экосистемы быстро создавать надежные аналитические витрины на Облаке Данных, чтобы глубже понимать клиентские пути и формировать персонализированные предложения.
Мы ищем сильного Data Engineer, который будет напрямую влиять на архитектуру и развитие этого стратегического инструмента. Вы будете создавать решения, которыми ежедневно пользуются десятки аналитиков и дата-инженеров.
Обязанности
- участвовать в проектировании и развитии архитектуры фреймворка для построения batch- и streaming-витрин
- разрабатывать ядро платформы и ее компоненты (оркестрация, метаданные, Data Quality-фреймворк) на Scala/Java
- создавать и оптимизировать абстракции и API (включая RESTful), которые упростят работу с данными для других команд
- проводить производительность и масштабируемость платформы на больших объемах данных (петабайты)
- тесно взаимодействовать с пользователями платформы (аналитиками, дата-инженерами из бизнес-команд) для сбора требований и обратной связи
- менторить младших разработчиков
Требования
- глубокое знание Scala или Java, SQL, Bash
- опыт с Apache Spark (обязательно), опыт с Flink, Kafka, Iceberg или аналогичными
- понимание DWH/Data Lake, ETL/ELT-процессов, SCD, Data Quality
- опыт проектирования отказоустойчивых и масштабируемых систем, понимание SOLID, опыт написания тестов (unit, integration)
- опыт кросс-функционального взаимодействия, принятия архитектурных решений, наставничества
будет преимуществом
- опыт с Hadoop-экосистемой (HDFS, YARN, Hive)
- знание Trino/Velox
- опыт работы с микросервисной архитектурой и REST API
- опыт с ClickHouse, Kubernetes, S3
- знание Python
- навыки работы с генеративными AI-моделями
- опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов
Условия
- работа в офисе по адресу г. Москва, ул. Поклонная, 3
- годовой бонус и ежегодный пересмотр
- расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
- корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
- льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.
Похожие вакансии
Высшее профильное образование. Опыт работы в гражданском проектировании и на аналогичных должностях не менее 3 лет. Опыт работы в службе...
Высшее образование профильное. Опыт работы от года. Активная жизненная позиция, самостоятельность, ответственность, организованность. Уверенный пользователь Word, Excel.
Образование: высшее профильное. Желателен опыт работы от 2-х лет. Опыт работы на фарм. производстве.
Знать основные принципы построения сетей передачи данных. Обладать навыками работы с измерительными приборами (анализатором цифровых каналов, рефлектометром, измерителем оптической мощности...
Знание технологии проведения строительных и электромонтажных работ. Опыт работы в 1С, Primavera, Смета.ру, Гранд Смета приветствуется. Техническое образование.