Data Engineer

17 мая 2024 • г Москва • ПАО "Сбербанк" • IT: Data Science и Data Engineering

Наша команда поддерживает и развивает набор инструментов специализированной Лаборатории данных Службы внутреннего Аудита Банка:

·  система управления Лабораторией

·  система управления ролевой моделью Лаборатории

·  платформа для создания Low-code/No-code приложений для аналитики данных

·  и другие инструменты для аналитики данных


Мы ищем Инженера данных способного самостоятельно проектировать, разрабатывать и внедрять сервисы и ETL решения, работающие с BigData

Обязанности

·      Разработка прототипов и промышленных витрин на платформах Hadoop \ GreenPlum по задачам Управления внутреннего аудита;

·      Участие в процессе производства ПО от участия в анализе задачи и подготовке требований до внедрения на промышленном стенде;

·      Поддержка (3-я линия) разработанных продуктов;

·      Реализация детальной архитектуры внедряемых сервисов

Требования

·      Опыт работы с MPP СУБД (GreenPlum);

·      Опыт работы с ETL инструментами (Informatica/Datastage/NiFi);

·      Опыт оптимизации производительности SQL запросов (планы запросов, индексы, дистрибуция, партиционирование);

·      Базовые знания DevOps на Jenkins;

·      Базовые знания Python (разработка сервисов загрузки и обработки данных)

·      Опыт в оптимизации процессов сбора, первичной обработки и хранения большого объема данных из различных типов источников;

·      Опыт оптимизации моделей хранения данных;


Будут преимуществом:

·      Опыт работы со Spark SQL;

·      Опыт работы со стеком Hadoop: HDFS, Yarn, Hive, Oozie;

·      Опыт работы с Apache Kafka

Условия

·      Работа в крупнейшем банке России;

·      Постоянное обучение. В нашей базе большое количество бесплатных онлайн лекций, вебинаров и обучающих материалов любой специализации;

·      Обучение в корпоративном университете Сбербанка (Истринский р-н);

·      Уровень заработной платы обсуждается индивидуально;

·      Трудоустройство согласно ТК РФ;

·      ДМС, страхование от несчастных случаев и тяжелых заболеваний Вас и Ваших близких;

·      Материальная помощь и социальная поддержка, корпоративная пенсионная программа;

·      Льготные условия кредитования.

Офис: Большая Андроньевская д.6, м. Таганская\Римская.