Data Engineer

04 июня 2024 • г Москва • ПАО "Сбербанк" • IT: Data Science и Data Engineering

Наш продукт: Аналитическое хранилище по ключевым клиентам банка – мы агрегируем у себя информацию из множества источников и далее собираем аналитические отчёты для дальнейшего использования этих данных в дашбордах.

Стэк: Greenplum, Hadoop, PostgreSQL, Python, Qlik Sense, Jenkins, GIT.

Обязанности
  • управление командой разработки DWH, формирование backlogа задач для команды разработки на квартал, контроль за сроками
  • участие в разработке и оптимизации ETL/ELT потоков загрузки данных из различных источников данных (Hadoop, Greenplum, flat files, kafka, REST API, etc)
  • выстраивание процесса улучшения качества данных, разработка фреймворков по проверкам, мониторингу и тестированию
  • оптимизация/автоматизация существующих процессов разработки (PostgreSQL, Python, CI/CD).
Требования
  • опыт работы в роли TeamLead, понимание сроков, производственного процесса в ИТ, умения планировать работу команды
  • опыт работы с ETL-инструментами (Informatica, IBM DataStage, SAS DI, Oracle DI, Talend, Pentaho, Apache Airflow)
  • базовый опыт в построении хранилищ – сбор, хранения и обработка больших массивов данных из различных источников (ключи, DDL/DML, метаданные, РРМ)
  • опыт разработки одного из языков общего назначения (Python, Java, C++, C#)
  • понимание стандартов и методологий разработки ПО (GIT, выстраивание производственного процесс на средах, code review, автотестирование, CI/CD)
  • опыт работы с Jira/Confluence или аналоги, опыт документирования процесса/результата.
Условия
  • официальное трудоустройство согласно ТК РФ
  • белая заработная плата (оклад + годовая премия)
  • постоянное обучение и профессиональное развитие за счет компании.
  • дружная команда
  • работа в офисе класса А+
  • страхование (от несчастных случаев, ДМС)
  • выплаты материальной помощи в особых/чрезвычайных случаях
  • дисконт-программы от компаний партнеров
  • льготное кредитование
  • бесплатный тренажерный зал на территории офиса
  • отсутствие дресс-кода
  • смешанный режим работы.