Data Engineer

Наша команда занимается разработкой витрин данных и созданием внутренних инструментов для автоматизации процесса разработки и вывода, исследованием новых источников данных, помогает командам соседних подразделений построить интеграцию с нашими процессами. Мы ищем специалиста, желающего развиваться в DE и готового делиться своими знаниями с коллегами.

• исследование источников данных (внешних данных, реплик АС Банка, других витрин)
• разработка и изменение витрин данных на Hadoop/GreenPlum исходя из требований аналитиков данных
• создание алгоритмов загрузки данных в витрины с учётом историчности, уникальности, логики обновления таблиц
• написание функций для первичной обработки, преобразования и агрегации данных на Spark (Scala, Java, Python).

• понимание работы Hive, Spark на Hadoop
• знания языков программирования Python
• знание SQL на уровне аналитических запросов
• понимание объектно-ориентированного подхода к разработке
• умение обращаться с git, bash.

Будет плюсом:

• опыт разработки на Spark/PySpark
• оптимизация выполнения сценариев на Spark
• понимание процессов ETL, ELT.

• комфортный современный офис рядом с м. Кутузовская
• возможность выбрать удобный график – офис/гибрид/удаленка
• ежегодный пересмотр зарплаты, годовую премию
• корпоративный спорт зал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• бесплатная подписка СберПрайм +, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера.