Альфа-Банк перевел работу с данными на российскую Lakehouse-платформу

Альфа-Банк совместно с партнером GlowByte завершил масштабное внедрение решений отечественного вендора Data Sapience — платформы Data Ocean Nova и инструмента SDI. Проект позволил банку объединить разрозненные системы в единый информационный слой, обеспечив бизнес-подразделения доступом к глубокой аналитике в режиме реального времени.

Переход на новый технологический стек стал ответом на потребность банка в оперативном планировании продаж и контроле прибыльности продуктов. До внедрения платформы работа с большим количеством аналитических систем замедляла получение данных. Новое решение позволило создать операционный слой (ODS), который обновляется в реальном времени и поддерживает произвольный анализ по запросу (ad-hoc).

Технологическая база и масштабирование

При выборе ИТ-архитектуры банк ориентировался на возможность независимого масштабирования ресурсов хранения и вычислений. Платформа Data Ocean Nova нативно работает в среде Kubernetes и поддерживает MPP-движки для параллельной обработки массивов данных. Это позволило изолировать ресурсы под разные задачи: от регламентной отчетности до обучения моделей искусственного интеллекта.

По словам технического директора развития технологий дата-продуктов Альфа-Банка Александра Заболоцкого, единый источник достоверных данных ускорил принятие решений и открыл возможности для самостоятельной работы бизнес-пользователей с отчетностью без привлечения ИТ-специалистов.

Итоги двух лет эксплуатации

Система уже прошла проверку под экстремальными нагрузками. В ходе проекта была выстроена онлайн-репликация для 1000 объектов, а технологический стек объединил механизмы Change Data Capture и потоковую обработку событий из Kafka.

Текущие показатели производительности системы:

• подключено 50 баз данных — источников инкремента;
• пиковая нагрузка достигает 10 тысяч изменений в секунду;
• суммарный объем ежесуточно обрабатываемых данных составляет 2 Тб.

Управляющий директор GlowByte Петр Пашков подчеркнул, что новая архитектура реализует подход data-ready, при котором данные готовы к использованию практически мгновенно после их появления в первичной системе.

В планах Альфа-Банка — расширение проекта. До середины 2026 года банк намерен подключить к платформе около 600 источников данных и завершить миграцию Hadoop-кластеров на Lakehouse-решение от Data Sapience.