Bell Integrator активно реализует проекты по всей России, среди наших заказчиков – крупнейшие системообразующие финансовые, телеком и ритейл компании страны.
Требования:
знание SQL на уровне аналитических запросов;
умение обращаться с git, bash.
знания языков программирования Java/Scala, Python;
понимание работы Hive, Spark на Hadoop;
Будет плюсом:
опыт разработки на Spark/PySpark;
оптимизация выполнения сценариев на Spark;
опыт использования Apache Oozie;
понимание процессов ETL, ELT
Задачи:
- исследование источников данных (внешних данных, реплик АС Банка, других витрин);
- разработка и изменение витрин данных на Hadoop исходя из требований аналитиков данных;
- создание алгоритмов загрузки данных в витрины с учётом историчности, уникальности, логики обновления таблиц;
- написание функций для первичной обработки, преобразования и агрегации данных на Spark (Scala, Java, Python);
- Code Review изменений, предлагаемых коллегами из своей и соседних команд.
Условия:
Возможность профессионального и карьерного роста в компании
Возможность поучаствовать в разных проектах;
Опыт работы в распределенной команде профессионалов;
Офисный формат работы в Москве
Похожие вакансии
Внимательность. Аккуратность. Опыт работы на металлообрабатывающих предприятиях. Опыт работы на сварном участке в качестве контролёра ОТК. Опыт работы в цехе...
Высшее образование (техническое). Опыт работы с маршрутными листами. Опыт работы с технологическими процессами. Знание ЕСКД, ЕСТД и ЕТКС.
Опыт работы со слаботочными системами (1 - 3 года). Знание типовых схем монтажа и схем расключения типовых устройств. Знание видов и...
Профильное образование (ПГС, строительство или др.). Знание нормативов ТСН-2001 для г. Москвы. Знание технологии производства общестроительных работ, работ по...
Знание принципов построения и эксплуатации высоконагруженных систем (web-серверов, реляционных БД, серверов приложений). Понимание архитектуры и механизмов работы ОС Linux...