В SberData мы создаем платформу данных для всего Сбера. Это более 350 источников данных и 100+ Пб информации, заказ и получение данных за 15 минут и современный технологический стек работы с данными, включая собственные сборки СУБД на базе Hadoop и Greenplum.
Наша команда развивает инструменты и внедряет технологию разделенного Compute & Storage в рамках концепции Lakehouse. Наша задача – спроектировать и внедрить надежное, безопасное решение для высоконагруженных расчетов витрин данных на современных технологиях Compute (Spark, Flink) и Storage (S3), работающее на 10000+ серверах.