Мы ищем Data Engineer в команду, которая отвечает за разработку и оптимизацию ядра хранилища данных и витрин, проектирование модели данных, диаграмм потоков данных и требований к качеству данных.
Вам предстоит:
-
Разрабатывать объекты ядра хранилища
-
Разрабатывать витрины отчетности
-
Оптимизировать запросы
-
Вести документацию
-
Поддерживать объекты хранилища данных
-
Взаимодействовать со смежными подразделениями
-
Имеете опыт работы с DWH на базе Clickhouse (понимание движков таблиц, индексов, репликации и шардинга)
-
Имеете знания SQL на продвинутом уровне (сложные запросы, аналитические функции и т.д.)
-
Имеете опыт оптимизации запросов
-
Умеете производить трансформацию, унификацию данных
-
Знаете методологии построения DWH (Data Vault, снежинка, якорная модель и т.д.)
-
Имеете опыт работы с реляционными СУБД (PostgreSQL, Oracle, MS SQL и пр.)
-
Имеете опыт работы с одним или несколькими оркестраторами (желательно c Airflow)
-
Имеете опыт работы с системами контроля версий (git)
-
Имеете опыт работы с Apache Spark
Похожие вакансии
От 5 лет опыта в качестве DevOps инженера. Опыт работы с Ansible. Опыт работы с Docker/Kubernetes. Опыт построения CI...
Опыт практической работы с тремя или более решениями следующих классов: антивирусная защита, защита от несанкционированного доступа, защита от утечек конфиденциальной...
Высшее техническое образование. Опыт создания и администрирования промышленных кластеров Kubernetes для высоконагруженных систем. Опыт работы с Ansible, AirFlow, web-серверами.
Опыт работы в технической поддержке / системном администрировании от 3 лет. Глубокое знание VoIP: Asterisk/FreePBX, SIP-протокол, SIP-транки, кодеки...
Высшее техническое образование (строительное / машиностроительное). — Уверенное владение AutoCAD (чтение чертежей и схем). — Статические расчеты: Ansys или Solidworks, SCAD, ЛИРА, ручной...