Lead Java Developer

SberData- Мы ищем Java разработчика для наших продуктов - сервисов федеративно доступа. Мы разрабатываем инфраструктурные компонента на основе open source кода для дата центра с данными объемом 10+ петабайт данных и десятками тысяч ядер, с фокусом на защиту данных и реализацию алгоритмов безопасности.

Waggle-Danсе: Обеспечивает возможность работы с HMS нескольких кластеров Hadoop (SDP/Cloudera) при условии наличия федерации между кластерами. Фактически представляет собой proxy сервис, который в онлайне запрашивает данные из внешнихHMS. Технически это Java процесс который запускается отдельно от Cloudera и реализует Thrift интерфейс Hive Meta store.

Sentry-proxy: Обеспечивает авторизация операций для Hive и Impala. Является proxy сервисов, который для настроенных федераций получает авторизационную информацию из внешних сервисов Sentry и Hadoop использует эту информацию для авторизации операция пользователя в Hive и Impala. Сервис собой представляет реализацию интерфейса Sentry и может запускаться как в случае наличия Sentryсервиса на локальном кластере, так и в случае его отсутствия. В случае отсутствия создаются синтетические права пользователям кластера.

Вам предстоит:

• Исследовать OSS библиотеки и фреймворки, проводить их анализ и доработку
• Разрабатывать компоненты для маскирования и шифрования
• Работать с библиотеками шифрования
• Проводить анализ требований и предлагать архитектуру компонентов

•  Уверенное владение Java SE
• Знание и опыт работы с Hadoop компонентами (прежде всего HDFS, Hive)
• Уверенные навыки кодирования
• Знание Kerberos, GSS API, JAAS Java Security, SASL, Apache Thrift
• Понимание сетевого программирования (socket) и сетей
• Опыт работы с реляционными БД

Будет плюсом:

• Знание Scala или Python
• Опыт использования Ansible

·      Гибкий график для оптимального баланса работы и личной жизни.

·      Бесплатный фитнес-зал в БЦ.

·      Профессиональное обучение, семинары, тренинги, конференции, корпоративная библиотека.

·      ДМС, страхование жизни.

·      Самые инновационные, амбициозные проекты и задачи.

·      Свободный дресс-код.

·      Льготные кредиты и корпоративные скидки.

·      Конкурентная компенсация (оклад и премии по результатам деятельности).