Системный аналитик в ядро сервиса репликации данных в Hadoop (Stork)

Описание команды

SberData - департамент по управлению данными всего Сбербанка. SberData строит централизованное хранилище данных, объем которого уже превышает 10 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI.

STORK - это команда, разрабатывающая собственный высокопроизводительный инструмент для потоковой передачи больших данных между реляционными СУБД и Hadoop.

С помощью нашего продукта Data Lake Сбербанка ежедневно пополняется сотнями терабайт свежих данных, которые используются для построения критичных бизнес-процессов и проверки гипотез в машинном обучении.

В ближайшее время перед нашей командой стоят амбициозные задачи по переходу на новый тех.стек продукта для перехода из пакетного в потоковый и NRT-режимы обработки данных.

• Выявление и проработка требований пользователей и заказчиков наших продуктов
• Формализация требований и ведение спецификаций
• Декомпозиция требований и постановка задач на разработку
• Взаимодействие с командой разработки и тестирования
• Взаимодействие со смежными командами в части интеграционных сценариев
• Согласование требований с заказчиками
• Документирование функциональности продукта
• Организация приемо-сдаточных испытаний новых версий продукта
• Организация и проведение демонстрации функциональности для пользователей наших продуктов
• Анализ и предложение решений по развитию функциональности продуктов
• Поддержка и консультирование пользователей нашего продукта (разбор инцидентов и анализ проблем).

• Опыт работы системным аналитиком в проектах разработки backend или платформенного ПО от 3-х лет
• Опыт описания требований и ведения инструкций (технические задания\спецификации, эксплуатационная документация)
• Опыт участия в проектах по методологии Agile
• Понимание принципов построения СУБД
• Понимание принципов организации хранилищ данных
• Понимание полного жизненного цикла и методик разработки ПО
• Знание практик и инструментария DevOps
• Знание нотаций описания программного обеспечения и бизнес-процессов (BPMN, UML)
• Понимание основ и опыт использования Hadoop (Spark, Hive, Oozie, Flink и т.д.)
• Опыт работы с СУБД (PostgreSQL или Oracle), хорошее знание SQL
• Опыт работы с инструментами Atlassian (Jira, Confluence, Bitbucket)
• Опыт работы с форматами JSON\XML\YAML
• Развитые коммуникационные и организационные навыки
• Английский язык – на уровне чтения технической документации
• Желателен опыт работы с NoSQL (Cassandra, ScyllaDB, MongoDB)
• Знание и понимание инструментов CDC (в частности, Oracle GoldenGate) будет плюсом.

• Структура дохода: фиксированный оклад + годовая премия (выплата в конце года)
• Место работы: г. Москва, м. Тульская / Нагатинская / Верхние Котлы;
• Официальное трудоустройство
• Гибридный формат работы: с 9:00 до 18:00 (есть возможность изменить часы прихода-ухода)
• Бессрочный трудовой договор
• ДМС
• Бесплатный фитнес на территории работодателя
• Внутренние и внешние курсы повышения квалификации.