Приглашаем Разработчика DWH в команду разработки банка.
Обязанности:
- Разработка и поддержка ETL/ELT процессов на Python;
- Интеграция данных из различных источников (RDBMS, API, файловые системы, очереди сообщений);
- Построение и оптимизация пайплайнов загрузки и трансформации данных;
- Разработка DAG'ов в Dagster для оркестрации процессов;
- Проектирование моделей данных (витрины, слой бизнес-логики);
- Обеспечение мониторинга, логирования и отказоустойчивости пайплайнов;
- Оптимизация производительности обработки данных (partitioning, indexing, parallelism);
- Взаимодействие с аналитиками, Data Scientists и BI-командами
- Проектирование и разработка хранилищ данных (DWH, Data Lake, Data Mart);
- Разработка ETL/ELT-пайплайнов на Python (batch и streaming);
- Оптимизация обработки больших данных и SQL-запросов;
- Построение потоков данных и интеграций (Kafka, REST, CDC);
- Работа с оркестрацией (Dagster,Airflow);
- Data modeling (Star Schema, Data Vault, 3NF);
- Обеспечение качества данных (Data Quality, Data Lineage).
Технологический стек:
Python, SQL, Dagster, Apache Airflow, Kafka, PostgreSQL, ClickHouse, dbt, Docker, Kubernetes, Git, REST API
- Официальное оформление в стабильную аккредитованную Минцифра ИТ-компанию EGAR;
- Формат работы - офис;
- График работы с 9:00 до 18:00;
- Конкурентный уровень заработной платы, который мы готовы обсудить на собеседовании;
- Полноценную проектную команду с четким разделением ролей;
- Оперативное решение организационных вопросов;
- Возможность профессионального роста (вертикального или горизонтального);
- Возможности обучения (курсы, сертификация);
- Бонусы по реферальной программе, за успешную рекомендацию;
- Дополнительно 4 дня в год по болезни без больничного листа (sick day);
- Расширенный пакет ДМС, включая стоматологию;
- Применение в работе современных технологий и стандартов.
Похожие вакансии
Внимательного к деталям и организованного человека, который умеет держать под контролем несколько процессов одновременно. Самостоятельного и проактивного специалиста, способного принимать...
Глубокое знание C, опыт от 3+ лет в системной Linux-разработке. Понимание сетевого стека (Ethernet, IP, TCP/UDP) и...
Опыт разработки под Android от 3 лет, с фокусом на UI, архитектуру и качество кода. Знание современных подходов к архитектуре...
Уверенно владеете C++. Разбираетесь в архитектуре систем на базе Linux. Понимаете принципы работы компьютерных сетей, работали с основными сетевыми протоколами.
Разбираетесь в архитектуре Linux. Понимаете принципы работы компьютерных сетей, работали с основными сетевыми протоколами. Работали с интерфейсами USB, UART, CAN...
