Data engineer (Рекламная платформа)

13 июня 2024 • г Москва • ПАО "Сбербанк" • IT: Data Science и Data Engineering

Мы - команда, создающая сервис, который будет управлять цифровыми рекламными поверхностями и платформой по размещению рекламы на поверхностях Банка и Экосистемы.

Используя данные СБЕРа и технологические решения его экосистемы, мы сможем реализовать уникальный сервис на рынке digital marketing. Он позволит нам показывать пользователям рекламу, которая будет нравиться и которая будет делать рекламные продукты эффективными и измеримыми для рекламодателей.

Если вы талантливый и амбициозный специалист в сфере ИТ, если вы хотите быть причастными к созданию лучших продуктов для лучших клиентов и уверенно отвечать за результаты, то мы рады принять вас в команду.

Обязанности
  • создавать новый пайплайны по обработке данных (и развивать уже существующие) в облачной экосистеме spark on k8s
  • проводить оптимизацию и тестирование пайплайнов
  • участвовать в создании дашбордов
  • мониторинг и устранение инцидентов
  • организация и реализация процесса совершенствования Data Quality.
Требования
  • опыт в обработке и построении витрин данных при помощи Spark и SQL
  • понимание принципов модели распределенных вычислений
  • опыт промышленной разработки на стеке Python/Scala от 2х лет
  • хорошие знания SQL.


Будет плюсом:


  • опыт разработки nrt контуров Spark Streaming, Flink;
  • знание инструментов MLOps (mlflow, Feast, Seldon);
  • понимание принципов работы основных элементов рекламной платформы (DMP, DSP, SSP);
  • понимание принципов работы рекомендательных систем;
  • понимание подходов к организации разработки (CI/CD, DevOps), практический опыт работы с инструментами Jenkins, SonarQube, TeamCity, Anisble, Git (BitBucket/GitLab).
Условия
  • команда специалистов из топовых ИТ компаний
  • регулярное обучение и профильные конференции, современное оборудование для работы
  • уровень дохода, который готовы обсуждать и отталкиваться от ваших пожеланий, плюс премии
  • офис метро Маяковская (гибридный формат работы).