Россельхозбанк удалил ПО американской Cloudera и перевел свое озеро данных на российские решения

3 декабря 2024 года стало известно о том, что Россельхозбанк завершил импортозамещение корпоративного озера данных, заменив программное обеспечение американской компании Cloudera на продукты российской Группы Arenadata — Arenadata Hadoop и Picodata. Проект стартовал в апреле 2023 года и был реализован без приобретения дополнительного оборудования.

Миграция осуществлялась поэтапно с постепенным снижением использования импортного программного обеспечения и добавлением ресурсов в целевой кластер без существенных остановок операционных процессов. При переходе на отечественное ПО были выявлены несоответствия в алгоритмах работы ключевых сервисов Hive, Yarn и Impala.

Россельхозбанк удалил ПО американской Cloudera и перевел свое озеро данных на российские решения

Директор департамента больших данных РСХБ Александр Сабуров подчеркнул, что новая платформа позволит сократить время обработки данных и ужесточить требования к оперативности, предоставляя пользователям информацию высокого качества в необходимый момент.

Банк использовал комплексный подход к решению возникших проблем, включая привлечение консалтинга Arenadata, изучение исходного кода решений, моделирование на внутренних и партнерских стендах, а также интеграционное тестирование. Все сотрудники прошли обучение работе с Arenadata Hadoop в учебном центре компании.Эволюция в развитии российских средств защиты от сетевых угроз: как Kaspersky NGFW меняет расстановку сил на рынке

В результате внедрения новой платформы банк получил возможность развивать финансовую аналитику, управленческую отчетность и контроль качества данных. Платформа поддерживает аналитические расчеты для региональных подразделений и интегрирована с системой искусственного интеллекта RAISA, которой пользуются более 300 сотрудников.

Директор департамента группы Arenadata по работе с финансовым сектором и международным бизнесом Юлия Ильина отметила, что замена зарубежного решения открывает перед финансовой организацией новые возможности для развития и соответствия высоким требованиям клиентов. После миграции летом 2024 года кластер был усилен дополнительными вычислительными узлами для повышения отказоустойчивости.