Старший инженер данных / Senior Data Engineer

Работодатель:
Опыт работы:
От 3 до 6 лет
Место работы:
Санкт-Петербург, Пулковское шоссе, 48

Мы ищем Инженера данных / Data Engineer в центральную инженерную команду Data Management бизнес-сегмента Pet Nutrition. Цель команды Data Management – внедрить процессы управления данными, а также практики и системы, которые позволят всей компании контролировать свои ресурсы в виде данных и управлять ими. Мы отвечаем за работу всего data-pipeline от исходной системы до отчета. Основной фокус центральной команды направлен на разработку собственных дата-продуктов и развитие инженерной практики по работе с данными в компании.

Вы будете:

  • Разрабатывать и оптимизировать пайплайны обработки данных (как batch, так и streaming)
  • Интегрировать новые источники данных в Data Lake
  • Участвовать в развитии фреймворка по качеству данных
  • Проводить код-ревью


Мы ожидаем:

  • Опыт разработки пайплайнов обработки данных в Airflow
  • Опыт оптимизации Spark-приложения
  • Понимание работы СУБД и принципов построения хранилищ данных
  • Опыт работы с Hadoop (Spark, HDFS, YARN etc.)
  • Уверенное владение SQL, Python/Scala/Java

Будет плюсом:

  • Опыт работы с Kafka, Nifi
  • Наличие опыта оптимизации потребления ресурсов
  • Готовность участвовать в развитии лучших инженерных практик внутри компании

Мы предлагаем:

  • Декретную позицию
  • Конкурентную заработную плату, квартальные/годовые премии
  • Расширенный ДМС для тебя и членов семьи, включая стоматологию
  • Гибридный график работы
  • Страхование жизни с первого рабочего дня
  • 100% оплату больничного листа
  • Корпоративную программу софинансирования долгосрочных накоплений
  • Компенсацию питания, оплату мобильной связи и интернета
  • Возможности карьерного и профессионального развития, а также обучение за счет компании
  • Корпоративную программу по поддержке здоровья и благополучия сотрудников (консультации с финансовыми специалистами, юристами, психологами и экспертами по здоровому образу жизни, марафоны здоровья и др.)
  • Работу в современном дружелюбном к домашним питомцам офисе
  • Возможность приобретать продукцию компании с корпоративной скидкой
  • Уютную кухню с перекусами, кофе и чаем
  • Систему бонусов и скидок от компании и партнеров

Похожие вакансии

Data Engineer (гибрид в Москве)
ЕВАППС

Язык: Python (уверенное владение, понимание ООП, типизации, работы с памятью). ETL/ELT: Опыт построения пайплайнов в продакшн (от 1–2...

230 000 руб.
Специалист направления валидации моделей ПВР и ВПОДК (Data Scientist )
Московский Кредитный Банк

Отличные знания математической статистики, эконометрики (машинного обучения) и теории вероятности. Отличные знания Python и SQL. Преимуществом являются кандидаты с математическим...

Инженер по разработке ПО для робототехники / Robotics Software Engineer
DentalFantasy

Необходимый опыт: Опыт разработки на Python и/или C++. Уверенное знание ROS2 (Robot Operating System 2). Опыт работы с...

Data Scientist (Midle)
билайн

Опыт в роли Data Scientist от 4 лет. Опыт end-to-end разработки ML-решений: от постановки задачи и работы...

Data Scientist (Анализ цены)
Домклик

Практический DS-опыт от 2 лет в CoreML/TimeSeries. Опыт полного цикла решения ML задачи: предобработка данных, выбор алгоритмов и...