Data engineer (scala)

04 сентября 2024 • г Москва • ПАО Сбербанк • IT: Data Science и Data Engineering

Прикладная аналитическая платформа Сбер B2C — это решение, позволяющее создавать аналитические витрины на Облаке Данных по различным направлениям бизнеса.

Синергия в продуктах и сервисах на основе клиентских путей, каждодневное предвосхищение потребностей клиента и формирование целостного предложения для сегментов от Сбера как экосистемы — ключевая задача нашей команды.

Мы занимаемся разработкой нового прикладного инструмента для команд, занимающихся работой с данными (модели, витрины, стриминг)

В команде Вам будут помогать Product Owner и разработчики.

Сейчас мы в поиске разработчика

Стек технологий: Scala/Java, Apache Spark, Hadoop, HIVE

Обязанности
  • участвовать в разработке и тестировании крутого инструмента
  • взаимодействовать с коллегами: как с разработчиками, так и с DevOPS-инженерами.
Требования
  • опыт работы scala-разработчиком/дата-инженером от 2-3 лет
  • знание SQL: понимание планов запроса, внутренней работы SQL-запросов
  • опыт работы с Hadoop и Apache Spark
  • понимание концепции хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality, полная-инкрементальная загрузки
  • знание типов медленно меняющихся измерений
  • опыт написания тестов (unit, integration, acceptance)
  • опыт работы с git и прочими системами контроля версий
  • умение работать в команде
  • готовность обучаться новым технологиям
  • базовое знание JIRA, Confluence
  • понимание основных принципов RESTful API

Будет плюсом:

  • опыт работы с Apache Flink, Apache Iceberg, Trino, S3, Kubernetes
Условия
  • официальное трудоустройство согласно ТК РФ
  • годовое премирование
  • страхование (от несчастных случаев, ДМС - с первого дня)
  • оздоровительные программы для детей сотрудников
  • возможность обучения за счет компании ·
  • выплаты материальной помощи в особых/чрезвычайных случаях
  • дисконт-программы от компаний партнеров (фитнес, страхование, туризм)
  • льготное кредитование
  • офис место Кутузовская (возможен гибридный формат)