Backend engineer
О проекте:
Мы - динамично растущая команда экспертов в области построения рекомендательных систем.
Наша главная цель - построить современную, масштабируемую платформу, которая будет постоянно предвосхищать и превосходить ожидания пользователей, предоставляя им персонализированные рекомендации на всем клиентском пути.
Наша платформа обслуживает широкий круг потребителей и строит персональные рекомендации во всех сферах бизнеса, таких как музыка, фильмы, онлайн торговля, медицина и многих других.
Если ты мечтаешь поучаствовать в создании такой рекомендательной системы, то тебе к нам!
Важнейший элемент такой системы — это исходные данные, которые используются алгоритмами машинного обучения для расчёта предпочтений миллионов пользователей. Работая в нашей команде, ты будешь участвовать в исследовании, разработке, тестировании и внедрении самых передовых алгоритмов извлечения, преобразования, загрузки и оценки качества данных. Ты получишь опыт внедрения таких алгоритмов в реальной высоконагруженной индустриальной экосистеме, начиненной большими данными.
Ты будешь заниматься разработкой мощной и интуитивной системы приёма и обработки больших данных, позволяющей объединить данные из различных источников в едином хранилище рекомендательной платформы.
- Участвовать в разработке системы передачи данных, в которой пользователям не нужно писать код для организации ETL/ELT процессов
- Разрабатывать и внедрять масштабируемые и надёжные решения в области обработки потоковых и пакетных данных, находясь на передовой линии этого процесса
- Работать над созданием легко-поддерживаемых и эффективных компонентов и систем
- Определять и устранять проблемы производительности и масштабируемости в сложных частях продукта
- Активно участвовать в обзорах дизайна системы
- Улучшать общее качество кода и продукта
- Совместно с архитекторами, участвовать в проработке и документированию архитектуры, а также подходов работы клиентов с хранилищем данных
- Сотрудничать со смежными командами для создания высококачественного продукта
- Наставлять и развивать младших инженеров в коллаборативной среде
· Высшее образование в области информатики, математики, инженерии программного обеспечения или смежной области
· Опыт работы в сфере разработки программного обеспечения или инженерии данных не менее 5 лет
· Владение одним или несколькими языками программирования, такими как Python, Golang или C++
· Профессиональное знание Python 3.x и желание изучать Golang обязательны
· Понимание распределенных систем, паттернов интеграции данных и архитектур на основе облачных решений
· Опыт работы с одной или несколькими системами и технологиями хранения больших данных: Apache Hive, GreenPlum, ClickHouse, S3, Apache Spark, Apache Impala, Delta Lake и подобными
· Опыт работы с популярными движками и системами обработки данных с открытым исходным кодом (Spark, Trino, Flink, Kafka или аналогичные).
· Практический опыт работы SQL и NoSQL базами данных, например: PostgreSQL, Redis, Apache Ignite, ClickHouse.
· Знание языка SQL запросов
· Знание классических алгоритмов и структур данных
· Опыт разработки серверных приложений под Linux
· Знание английского языка на уровне чтения документации
Будет плюсом:
· Опыт работы с оркестраторами потоков операций обработки данных: Apache Airflow, Prefect, Dagster
· Опыт работы с рекомендательными системами
· Опыт работы с облачными платформами
· Стабильный доход и социальная поддержка сотрудников
· Расширенный ДМС с первого дня работы для сотрудников и льготная медицинская страховка для близких
· Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров;
· Корпоративная пенсионная программа
· Корпоративное обучение за счет компании
· Реферальная программа для сотрудников: можно пригласить в команду знакомых профессионалов и получить вознаграждение
· Работу по Agile с лучшими из IT индустрии: 2000 продуктовых команд и возможность внутреннего перемещения
· Опция удалённой работы из дома – до 4-х дней в неделю
· Комфортный офис, бесплатные снеки, спортзалы с бассейнами
· Офис: г. Нижний Новгород, ул. Октябрьская, 35
