Data инженер

15 ноября 2023 • г Москва • ПАО Сбербанк • IT: Data Science и Data Engineering

Мы в поиске Data Engineer в команду Голос клиента

АС Голос Клиента - аналитическая система по банковскому CSI/NPS с ведением и контролем мероприятий по улучшению продуктов банка. АС собирает все обращения клиентов, оценки NPS/CSI, использует результаты отработки банковских AI-моделей и строит аналитические дашборды. Пользователи строят в АС планы мероприятий по устранению корневых причин и следят за их исполнением в рамках соответствующего процесса

Обязанности

Создание новых и доработка существующих потоков данных NRT с обработкой больших массивов данных с целью запуска клиентских опросов для расчета CSI для различных продуктов банка и экосистемы

Сопровождения процесса по выводу потоков в промышленную эксплуатацию:

Оформление технической документации
Участие в ПСИ
Консультирование команды сопровождения по установке и эксплуатации дистрибутивов

Развитие и поддержка самописных инфраструктурных систем команды:

Поддержка и развитие репликатора данных для репликации данных из Postgre в Hadoop
Поддержка и развитие перекладчика данных в Kafka Synapse
Усовершенствование алгоритмов обновления и загрузки данных
Повышения производительности расчетов
Разработка алгоритмов контроля и мониторинга качества данных

Требования

Опыт работы с потоковыми данными c использованием Spark Streaming

Обязательный опыт работы с инструментами BigData:

Hadoop (Hive, Spark, Kafka, Oozie)

языки программирования (Scala, Java, Pyton)

инструменты DevOps (Git, Nexus, Jenkins)

Опыт работы с обработкой больших массивов данных

Умение анализировать данные, а также работать с чужим кодом

Желание развиваться, осваивать современные технологии Опыт работы от 3-х лет в роли Data-инженера

Условия

Команда профессионалов, готовых поддержать ваши инициативы

Мощное железо, дополнительные мониторы и все, что нужно для продуктивной работы