Data engineer (оптимизация)

Работодатель:

Опыт работы:

От 1 года до 3 лет

Обязанности:

Участие в проекте построения Платформы данных на технологиях (Greenplum, Clickhouse, S3 + Impala)
Разработка и поддержка ETL/ELT-процессов с использованием DBT (Data Build Tool).
Написание и оптимизация SQL-трансформаций разной сложности.
Интеграция с сервисами оркестрации, доставки данных.
Создание тестов, технической документации

Требования:

Опыт работы от 2 лет с одной современной СУБД, желательно MPP (GreenPlum, PostgreSQL, MS SQL Server, Oracle, Teradata, и т.д.).
Опыт разработки на SQL от 2 лет (понимание JOIN, оконных функций, агрегаций, CTE).
Практический опыт работы с DBT Core или DBT Cloud хотя бы на одном проекте (личный/учебный/коммерческий).
Базовые знания Python, Jinja для написания скриптов или кастомных макросов в DBT.
Опыт работы от 1 года с инструментами оркестрации (Airflow, Dagster).
Понимание концепций хранилищ данных (DWH), витрин данных, медленно изменяющихся измерений (SCD).
Знание основ работы с Git (ветки, коммиты, пул-реквесты).
Понимание жизненного цикла данных (загрузка, трансформация, выгрузка).
Умение читать и анализировать чужой код.
Желателен опыт работы со SPARK (личный/учебный/коммерческий).

Условия:

Оформление по ТК РФ в ИТ-аккредитованную компанию
Годовой бонус до 15% от годового дохода
Выстроенная система работы с персоналом: индивидуальный план развития, выделенный бюджет на обучение у сторонних подрядчиков, регулярные 1:1 с руководителем
ДМС, включая стоматологию, страхование жизни и здоровья в поездках за рубеж. А еще можно застраховать родственников с корпоративной скидкой;
Программа корпоративных скидок Best benefits
Дополнительный оплачиваемый отпуск

Похожие вакансии