Arenadata Hyperwave 4.3.0
В новой версии Arenadata Hyperwave расширены возможности аналитики, повышен уровень безопасности и улучшены эксплуатационные характеристики.
Ключевые изменения:
- появилась возможность переводить хосты кластера в режим обслуживания с временным или полным исключением из работы сервисов;
- для HUE добавлен компонент HUE HAProxy, который обеспечивает балансировку нагрузки, маршрутизацию HTTP-/TCP-трафика и масштабирование сервиса;
- для Trino появился Trino History Server для долговременного хранения запросов, для Trino FTE реализован механизм удаления устаревших объектов из хранилища данных обмена;
- Spark 3 получил поддержку работы с геопространственными данными с помощью Apache Sedona;
- для Kyuubi реализована возможность использования Spark Connect, включая LDAP- и kerberos-аутентификацию и клиенты для Python и Java; добавлена поддержка SPNEGO;
- реализована интеграция HBase с Ozone, для Ozone S3 Gateway появилась возможность использования кеша для хранения часто используемых метаданных;
- предусмотрена возможность активации kerberos-аутентификации в кластерах ADH с уже установленным сервисом Ozone;
- ADB Spark Connector получил поддержку ADB 7 и Greengage DB 7;
- обновлены версии ключевых сервисов платформы, включая HDFS, YARN, Hive, HBase, ZooKeeper, Ozone, Spark 3 и Spark 4;
- добавлена поддержка Astra Linux SE 1.8.4.
Arenadata Platform Security 2.2.0
Релиз Arenadata Platform Security нацелен на упрощение развёртывания защищённых кластеров и обновление ключевых компонентов платформы.
Ключевые изменения:
- появилась возможность устанавливать ADPS через Wizard в ADCM, выбирая оптимальную конфигурацию кластера: включить использование Kerberos или SSL, при необходимости активировать плагины Ranger;
- добавлена поддержка SSL для сервиса Monitoring;
- обновлены версии сервисов Ranger, ZooKeeper, Solr;
- добавлена поддержка Astra Linux SE 1.8.4.
ADH Cloud 1.3.1-1
Внедрён ряд улучшений и оптимизаций:
- ограничение keytab-файлов и кешей секретов выбранными пространствами имён;
- сокращение времени удаления подов Trino;
- исключение обязательности аутентификации на эндпойнте метрик и наличия соответствующего RBAC на уровне кластера;
- исправление генерации ldapSecret оператором Kerberos;
- поддержка переменных среды в контейнере оператора Trino и CLI.
- закрыт ряд уязвимостей и обновлены версии основных сервисов: Impala — до 4.5.0.2, Trino — до 481.1, Spark 3 — до 3.5.4.4 и Spark 4 — до 4.2.0.1.
ADQM Control 1.3.0
В новой версии ADQM Control значительно расширены возможности мониторинга и анализа состояния кластеров Arenadata QuickMarts.
Ключевые изменения:
- на странице Queries появился график Host, показывающий распределение нагрузки между хостами и позволяющий выявлять аномальные значения метрик;
- реализовано представление Aggregated Tables, объединяющее данные о таблицах на разных хостах и позволяющее анализировать суммарное количество запросов, объём данных и равномерность распределения нагрузки;
- для таблиц в разделе Top 10 tables появилась возможность просматривать динамику выбранных метрик;
- добавлена настройка глубины хранения исторических данных;
- на странице Tables теперь отображается время существования таблиц и доступна динамика количества запросов;
- реализованы оповещения о недоступности хоста или сервиса ADQMDB;
- добавлена поддержка Red Hat Enterprise Linux 9 и РЕД ОС 8.0.
Arenadata DB 6.31.0.1
Ключевые изменения:
- в состав продукта добавлен сервис PgBouncer для управления пулом подключений;
- реализована возможность устанавливать защищённое соединение между ADB и LDAP-серверами с использованием LDAPS или StartTLS;
- в Grafana появились новые дашборды для мониторинга операций резервного копирования через gpbackup и работы сервиса PXF;
- переработано действие Redistribute: теперь оно выполняется на уровне сервиса ADB и не блокирует кластерные действия;
- в процессы Install, Reinstall и Upgrade добавлена автоматическая проверка поддерживаемой версии операционной системы.
Ядро Greengage DB обновлено до версии 6.31.0, а PXF — до версии 6.16.0. Также добавлена поддержка Red Hat Enterprise Linux 9 и РЕД ОС 8.0.
ADB Enterprise Services 1.1.0
В новой версии ADB Enterprise Services расширены возможности мониторинга, резервного копирования и администрирования кластеров Arenadata DB.
Ключевые изменения:
- в ADB Control появился график Nodes, отображающий количество активных экземпляров узлов плана выполнения запросов;
- реализована возможность добавлять и редактировать комментарии к SQL-командам, а также искать команды по содержимому комментариев;
- ADBM введён новый статус резервных копий Deleted, позволяющий некоторое время сохранять метаданные уже удалённых бэкапов;
- для потокового восстановления данных появилась визуализация прогресса с детализацией по сегментам кластера;
- добавлены новые настройки контрольных сумм и проверки свободного пространства для хранилищ;
- появилась возможность ограничивать используемые протоколы SSL/TLS и наборы шифров;
- улучшено отображение активных фильтров и сортировки в интерфейсе;
- усовершенствована обработка архивирования WAL при использовании pgBackRest.
- добавлена поддержка Red Hat Enterprise Linux 9 и РЕД ОС 8.0.