ВТБ завершил развёртывание новой платформы для сбора, хранения, обработки и анализа журналов (Log Storage System). Основой решения стала платформа сбора и обработки данных Arenadata EDP.
Владимир Дергачёв
Руководитель департамента развития инфраструктуры банка ВТБ
«Банк рассмотрел различные варианты иностранных и российских решений и в качестве платформы хранения журналов выбрал технологический стек Arenadata. Его преимущества не только в экономической целесообразности и решении задач импортозамещения. Потенциал Log Storage System в том, что этот проект позволит нам адаптироваться к масштабным внутриструктурным изменениям, динамичному росту объёма данных, а также откроет новые возможности для проактивного мониторинга и глубокой аналитики».
Новая система позволит банку снизить стоимость владения инфраструктурой хранения, обработки и анализа журналов в 2 раза, повысить надёжность информационных систем в условиях динамических изменений и повысить качество внутрибанковских сервисов. Выявление источника нештатных ситуаций ускорится максимум в 2 раза, новое решение позволит использовать инструменты ML для предиктивного анализа, который поможет предотвращать сбои и другие нештатные ситуации.
Антон Балагаев
Директор по консалтингу компании Arenadata
«Нашей первоначальной задачей было внедрение платформы и проверка базовой функциональности в работе с разными источниками данных. Тестирование показало эффективность предложенной архитектуры и готовность платформы к переходу на новый этап приёмосдаточных испытаний».
В настоящий момент завершен первый этап внедрения платформы, который включал в себя внедрение и тестирование нового хранилища для сбора событий из трёх внутрибанковских информационных систем. Сейчас идёт интеграция с инфраструктурными сервисами, тестирование дополнительного функционала и подключение новых источников данных микросервисных платформ банка. Следующим этапом станет создание полноценной интеллектуальной системы сбора и анализа логов, способной классифицировать и агрегировать события, выявлять аномалии, находить взаимосвязи между событиями и отслеживать тренды, автоматически регистрировать инциденты на основе анализа исторических данных за период от нескольких месяцев до нескольких лет с применением моделей машинного обучения.
Ожидается, что к концу 2021 года объём хранилища логов ВТБ составит не менее 1 петабайта. Новая платформа будет интегрирована с сотней внутрибанковских источников.
Проект стартовал осенью 2020 года. В его реализации задействованы команда ИТ-департамента и департамента анализа моделирования данных банка ВТБ, команда Arenadata и ИТ-интегратор «Т-Дата».