Ак Барс Банк

Миграция корпоративного хранилища данных с IBM Netezza на Arenadata DB

Акционерный коммерческий банк «Ак Барс» приступил к реализации проекта по развитию управления данными в соответствии с новыми бизнес-задачами. Одним из первых проектов стала миграции корпоративного хранилища данных на новую платформу Arenadata DB (ADB).

Подробнее о банке

Ак Барс Банк успешно работает на финансовом рынке с 1993 года. Имеет все виды существующих в Российской Федерации банковских лицензий, оказывает более 100 видов банковских услуг для корпоративных и частных клиентов. На начало 2021 года территориальная сеть банка насчитывает 129 дополнительных офисов, 83 операционных офиса и 11 операционных касс. Величина собственного данного капитала составляет 78,2 млрд рублей. Стабильность деятельности банка гарантирует оплаченный уставный капитал в размере 48,1 млрд рублей. Банк является членом союза «Торгово-промышленная палата Республики Татарстан», участником ПАО «Московская биржа», членом ассоциации «Россия» и ряда других значимых некоммерческих организаций финансового рынка.

Цели и задачи проекта

Офис управления данными существует в Ак Барс Банк с 2014 года. Это самостоятельная структура, ориентированная на решение задач разных бизнес-подразделений. Общая стратегия развития управления данными была сформирована в банке тогда же, в 2014 году. Новый этап стратегии предполагает переход на следующую ступень развития офиса управления данными: внедрение гибкой платформы управления данными, новые модели взаимодействия с бизнес-подразделениями и трансформацию восприятия ценности данных в компании.

Основным драйвером текущих изменений стало завершение жизненного цикла IBM Netezza. Кроме того, с развитием собственного центра обработки данных банк стал больше внимания обращать на программные решения, появилась потребность уйти от текущей монолитной архитектуры. В банке уже реализован проект по созданию собственного облака с архитектурой application-control interface, полностью программно управляемого и ориентированного на микросервисную архитектуру.

Основная цель изменений — переход к технологиям самообслуживания, создание простой и понятной экосистемы, в которой все подразделения банка смогут самостоятельно извлекать ценность из данных и оперативно использовать их в работе.

Новая стратегия подразумевает поэтапную реализацию серии проектов сразу в нескольких направлениях:

  • качество данных;
  • управление данными;
  • система управления мастер-данными и нормативно-справочная информация;
  • создание обновлённого корпоративного хранилища и BI;
  • безопасность данных (проекты по обезличиванию данных, по ролевым моделям доступа, а также по тематике DevSecOps);
  • создание архитектуры данных;
  • формирование внутренней экосистемы управления данными.

Работы по реализации стратегии начались осенью 2020 года с пилотирования нескольких решений, часть из которых на начало 2021 года находится в стадии реализации, часть — в стадии подведения промежуточных итогов, часть — в планах.

В результате запланированных мероприятий Ак Барс Банк сможет:

  • снизить TCO (total cost of ownership — совокупная стоимость владения) ИТ-инфраструктуры;
  • минимизировать до допустимого уровня валютные риски и риски иностранных поставщиков;
  • обеспечить требуемые нефункциональные свойства системы (надёжность, безопасность, доступность и т. д.) в соответствии с запланированным многократным увеличением объёма обрабатываемых данных, а также увеличением количества источников данных;
  • увеличить скорость обработки данных и получить возможность для реализации дополнительных сценариев в направлении бизнес-аналитики;
  • сократить время на подключение новых источников данных к платформе управления данными.
Вячеслав Яшкин
Вячеслав Яшкин
Директор по информационной безопасности и управлению данными Ак Барс Банк

«Безусловно, цифровая трансформация современной организации невозможна без выстраивания стратегии работы с данными. Данные нужны везде — для улучшения клиентского опыта, для формирования уникальных предложений для клиентов, для отслеживания ключевых показателей эффективности организации, для соответствия требованиям регуляторов. В Ак Барс Банке история развития корпоративного хранилища существует давно, однако сейчас пришло время значительной трансформации безусловно правильных подходов, заложенных на старте, для соответствия современным требованиям заказчиков, клиентов и рынка. Эту проблему мы и стараемся решить, выполняя качественный и количественный рывок в рамках нашей разработанной стратегии».

Миграция на Arenadata DB

Одним из первых проектов в рамках общей ИТ-стратегии стала миграции существующего корпоративного хранилища на новую платформу сбора и хранения данных. Исторически процесс управления данными в компании был построен на технологиях компании IBM. Ключевой предпосылкой для выбора новой платформы стало прекращение поддержки программно-аппаратных комплексов IBM Netezza.

Возникла необходимость выбора альтернативного решения, которое будет удовлетворять нескольким блокам критериев:

  • пройденные кейсы (15 критериев по выполнению отдельных задач);
  • ключевые требования к платформе (13 блоков требований, включая интеграционные требования, требования к доступности решения, информационной безопасности, конфигурируемости и другие);
  • требования к процедуре миграции: возможность миграции в течение года, возможность поддержки миграции в рамках существующих партнёров банка, возможность миграции внутренними ресурсами банка;
  • стоимость.
В числе возможных вариантов рассматривались решения IBM, Micro Focus и Greenplum («ванильный», решение Pivotal и Arenadata DB). В течение полугода банк проводил пилотные тестирования, включая нагрузочные тесты и тесты по миграции данных. Общий список сравнения разных систем включал более 400 позиций. В результате по совокупному набору критериев выбор был сделан в пользу Arenadata DB.
Вячеслав Яшкин
Вячеслав Яшкин
Директор по информационной безопасности и управлению данными Ак Барс Банк

«Arenadata была выбрана по результатам достаточно ожесточённой баталии. Пилотные проекты включали серьёзные испытания, множество критичных стресс-тестов. У Arenadata были и адекватная стоимость владения, и интересный для нас технологический стек, и — значимое преимущество — нативная интеграция всех компонентов с автоматизированным процессом инсталляции продуктов. Это был очень осознанный выбор, который нас полностью устраивает».

IBS

Технологическим партнёром Ак Барс Банка по миграции стала IBS – российская IT-сервисная компания, которая оказывает услуги в области оптимизации бизнес-процессов, создания систем управления, управления данными, анализа и моделирования, разработки, тестирования и сопровождения программного обеспечения, создания вычислительных центров и систем хранения и аутсорсинга обеспечивающих бизнес-процессов. Перед основной миграцией команда IBS реализовала пилотный проект, в рамках которого был определен технологический стек, доказана его возможность выполнять поставленные задачи и разработана дорожная карта выполнения проекта В ходе миграции специалисты IBS поэтапно выполнили работы по оптимизации модели хранения, переносу исторических данных: слои детальных данных, агрегатов, технологических и бизнес-витрин, пользовательских аналитических  данных и песочниц данных, а также полную миграцию всех интеграционных потоков и расчетных механизмов. Пользовательский уровень был доработан в соответствии с логикой, которая использовалась в IBM Netezza. Всего было перенесено порядка 40 BI-отчетов, которыми регулярно пользуются финансовый департамент банка, дирекция по развитию клиентского сегмента, дирекция финансовых рисков и другие подразделения. Команда IBS помогла выстроить пользовательские процессы: эксплуатацию хранилища, обновление, обеспечение качества данных, обеспечение функциональности и Data SLA. Также IBS поддержала одновременную работу двух хранилищ в переходный период, благодаря чему сервисы оставались доступными для пользователей.

DIS Group

Куратором пилотного проекта, а также консультантом и экспертом в направлении Data Governance стала компания DIS Group.

DIS Group представляет на рынке инновационные решения в области управления данными, бизнес-аналитики, защиты информации на базе технологий признанных мировых лидеров, таких как Informatica, KMS Lighthouse, NICE Actimize и других, а также осуществляет консалтинг и внедрение проектов по данным направлениям. В течение многих лет компания реализует миссию поддержки компаний на пути цифровой трансформации, предлагая лидирующие технологии и методологию корпоративного управления данными.

Значимыми нюансами проекта стали две технологические особенности:

  • для миграции на новую платформу частично переписывалась логика исходных ETL-сценариев;
  • процесс миграции на новую платформу происходил бесшовно: параллельно с реализаций актуальных бизнес-задач.
Павел Лихницкий
Павел Лихницкий
Генеральный директор компании DIS Group

«Данные играют ключевую роль в процессе цифровой трансформации бизнеса. Поэтому сегодня мы видим огромный интерес к нашим технологиям и экспертизе со стороны компаний из совершенно разных отраслей и помогаем клиентам создавать по-настоящему ценные активы данных. У нас есть для этого инструменты, методология, команда. Есть и партнёры, в частности компания Arenadata, которые активно с нами работают».

Ожидаемые результаты

Реализация выбранной ИТ-стратегии позволит компании добиться синергетического эффекта в работе команды, участвующей в разработке новых продуктов и, как следствие, улучшить ключевой бизнес-показатель «Time to Market». Кроме того, он должна обеспечить появление одного из наиболее значимых компонентов в работе с Big Data — бизнес-глоссария управления данными. Этот инструмент ориентирован на то, чтобы сделать работу с большими данными более понятной, прозрачной и удобной для всех заказчиков и участников процесса

В результате реализации стратегии банк получит:

  • проверку качества данных и единый реестр проверок;
  • целевой технологический стек и импортозамещение;
  • оперативный слой данных и Real-Time Marketing;
  • лаборатории данных;
  • платформу для моделей предиктивной аналитики;
  • бизнес-глоссарий и управление метаданными;
  • принципы и стандарты по архитектуре данных;
  • корпоративные модели данных и показателей соответствия общей модели IT-решений в ландшафте банка;
  • стратегию по управлению данными;
  • автоматизацию подключения и классификации источников (DataOps).

Целевые оцифрованные показатели проекта:

  • объём структурированного хранилища более 100 Тб;
  • уменьшение количества выходных отчётных форм (BI + статические) с ~3000 до ~1000;
  • уменьшение времени подключения новых источников с 2–4 месяцев до нескольких дней;
  • увеличение покрытия не менее чем 80% Business Critical и Mission Critical систем и сервисов.

Спасибо, что написали нам

Мы обработаем вашу заявку как можно быстрее. Ждите ответа в ближайшее время.

Получите бесплатную консультацию по организации корпоративной платформы данных

ошибка! проверьте правильно ли вы заполнили поля

Этот сайт использует cookie-файлы и другие технологии, чтобы помочь вам в навигации, а также предоставить лучший пользовательский опыт, анализировать использование наших продуктов и услуг, повысить качество рекламных и маркетинговых активностей.