Разработчик команды поставки данных

19 сентября 2024 • г Новосибирск, Новосибирская область • ПАО Сбербанк • IT: Разработка
можно без опыта

Проект реализует требования заказчиков по поставке данных в корпоративное хранилище данных.

Команда занимается поставкой данных используя ClickHouse, SAP BW, SAP DS, Airflow, Spark, Kafka2HDFS.

Цель перейти на прямые поставки из ClickHouse до Hadoop.

Обязанности
  • Совместно с архитекторами актуализировать архитектуру по новому тракту поставки
  • Проанализировать существующие решения по поставке и выбрать подходящее
  • Реализовать поставку данных от источника до потребителя
Требования
  • Понимание архитектурных принципов поставок данных.
  • Понимание основ хранения данных и форматов передачи.
  • Опыт по схожим проектам не менее года.
  • Опыт работы в быстро меняющейся и гибкой рабочей среды
  • Практические разработки по созданию масштабируемых пайплайнов
  • обработки данных и другие работы по обработке данных/моделированию с использованием одного или нескольких языков: Python, Kafka, Hadoop/Spark
Условия
  • комфортный современный офис
  • возможность выбрать удобный график – офис/гибрид/удаленка (опционально)
  • ежегодный пересмотр зарплаты, квартальную и годовую премию
  • (премия указывается в зависимости от должности и системы премирования)
  • корпоративный спортзал и зоны отдыха
  • более 400 образовательных программ СберУниверситета для профессионального и карьерного развития 
  • программа адаптации и помощь руководителя на старте
  • расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
  • бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
  • вознаграждение за рекомендацию друзей в команду Сбера