Data engineer (Рекламная платформа)

19 июня 2024 • г Москва • ПАО "Сбербанк" • IT: Data Science и Data Engineering
можно без опыта

Мы - новая быстрорастущая команда, создающая сервис, который будет управлять цифровыми рекламными поверхностями и платформой по размещению рекламы на поверхностях Банка и Экосистемы.

Используя данные СБЕРа и технологические решения его экосистемы, мы сможем реализовать уникальный сервис на рынке digital marketing. Он позволит нам показывать пользователям рекламу, которая будет нравиться и которая будет делать рекламные продукты эффективными и измеримыми для рекламодателей.

Если вы талантливый и амбициозный специалист в сфере ИТ, если вы хотите быть причастными к созданию лучших продуктов для лучших клиентов и уверенно отвечать за результаты, то мы рады принять вас в команду.

Обязанности
  • Разработка/развитие и поддержка пайплайнов обработки данных в облачной среде;
  • Проводение оптимизации и тестирования пайплайнов;
  • Участие в создании дашбордов;
  • Создание систем мониторинга;
  • Участие в процессах создания Data Quality;
  • Развитие документации.
Требования
  • Отличные знания SQL: оптимизация и понимание планов запроса, внутренней работы SQL (алгоритмы соединения, индексы и т.п.)
  • Опыт промышленной разработки на Python от 2х лет и хорошее понимание принципов этого языка
  • Уверенное понимание работы Spark
  • Опыт использования AirFlow или других планировщиков задач
  • Понимание концепции хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты
  • Опыт работы с Git


Плюсом будет:


  • Опыт работы со стриминговым ETL: Spark Structured Streaming, Kafka
  • Знакомы с Kubernetes
  • Знакомы с Docker
  • Опыт работы с большими данными
Условия
  • Интересные задачи по продуктам, влияющим одновременно на всю Экосистему: мы пишем продукты с 0, а значит никакого legacy и свобода творчества;
  • Команда специалистов из топовых ИТ компаний;
  • Регулярное обучение и профильные конференции, современное оборудование для работы;
  • Уровень дохода, который готовы обсуждать и отталкиваться от ваших пожеланий, плюс премии;
  • Комфортный офис и гибкий график;
  • Множество плюшек от Сбера.