«Мы рады представить всем пользователям продуктов Arenadata абсолютно новый инструмент для более глубокого мониторинга и анализа состояния продукта ADQM на основе СУБД ClickHouse, не имеющий прямых аналогов на коммерческом рынке и в open source. Компания Arenadata планомерно воплощает стратегию по реализации специализированных и более функциональных решений для более глубокого анализа своих продуктов и управления ими под общим наименованием Control. Разработка ADQM Control длилась более полутора лет, и в рамках неё были решены сотни продуктовых и оптимизационных задач. Мы надеемся, что пользователи продукта ADQM высоко оценят удобство, гибкость и функционал нового инструмента».
Ключевые возможности продукта ADQM Control:
- Мониторинг состояния кластеров ADQM на основе системных и сервисных метрик
Реализован функционал сбора, анализа, хранения и визуализации информации о состоянии подключённых кластеров ADQM, в том числе:- Heat map — визуально удобное представление информации о состоянии всех хостов кластеров ADQM;
- настраиваемый список оповещений о потенциальных и зафиксированных критических проблемах, зафиксированных на хостах кластеров ADQM;
- настраиваемый список инцидентов — оповещений о проблемах, объединённых в единую логическую группу;
- хранение и представление истории оповещений на основе настроенных сервисных метрик хостов кластеров ADQM с возможностью их сортировки и фильтрации.
- Контроль и анализ состояния СУБД ADQM/ClickHouse
Реализована возможность сбора данных и контроля состояния таблиц с данными кластеров ADQM, в том числе на уровне колонок, с возможностью их визуального и табличного представления для более эффективного управления ADQM и доступными ресурсами кластера. Это возможно за счёт информации о редко используемых данных и оптимального выбора кодеков сжатия. - Анализ пользовательских запросов
Реализован функционал анализа пользовательских SQL-запросов, включая такие возможности, как сбор различных метрик по пользовательским запросам (пользователь, синтаксис, статус выполнения, длительность выполнения, потребляемые ресурсы, частота выполнения и многие другие), сортировка и фильтрация собранных данных, визуализация данных по запросам в виде удобных графиков. Это позволяет быстро и удобно анализировать пользовательскую нагрузку, выявлять и предотвращать выполнение проблемных запросов, определять потребляемые и требуемые ресурсы, диагностировать произошедшие ошибки, повышая общую эффективность и стабильность работы кластеров СУБД ADQM. - Функционал управления доступом и пользователями
Реализованы базовые функции управления пользователями ADQM Control с возможностью вывода списка пользователей, его фильтрации и с функцией поиска. Также пользователям доступно управление парольными политиками. - Поддержка SSL для всех сервисов ADQM Control
В целях обеспечения современного уровня безопасности работы с данными реализована возможность безопасного соединения с кластерами ADQM, а также защиты каналов обмена данными между всеми компонентами сервиса ADQM Control за счёт поддержки SSL-шифрования трафика. Настройка SSL-соединений выполняется просто и удобно через кластерное действие Manage SSL в интерфейсе системы.
Документация по продукту ADQM Control доступна по ссылке. С полным описанием релиза можно ознакомиться здесь.
Напомним, что Arenadata QuickMarts (ADQM) — кластерная колоночная СУБД на основе технологии ClickHouse, ставшей фактически отраслевым стандартом для реализации задач оперативной бизнес-аналитики на больших объёмах данных. Продукт подходит компаниям, которым нужна быстрая аналитика, и может применяться в различных сферах бизнеса.
ADQM решает такие задачи, как:
- Быстрая обработка одновременных запросов сотен пользователей витрин данных.
- Работа в связке с СУБД Arenadata DB (ADB) для реализации data-mart-слоя.
- Хранение и анализ временных рядов.
- Data Science.
- Анализ серверных журналов.
- СУБД для BI-систем.
Продукт Arenadata QuickMarts сертифицирован ФСТЭК России по требованиям к 4-му уровню доверия средств обеспечения безопасности информационных технологий (УД 4).