RU
Resources
Feedback
Ru
menu

Arenadata Streaming

Easy Processing of Huge Data Amounts

Arenadata Streaming (ADS) is a scalable, fault-tolerant solution for real-time streaming data processing, adapted for enterprise and built on Apache Kafka and Apache Nifi.
download documentation

Continuous huge data exchange

High-load enterprise systems handle enormous data flows, like millions of incoming messages per minute. To cope with such a huge volume, a company needs to arrange a non-stop and fault-tolerant data exchange between required applications and prevent any data loss. Arenadata Streaming effectively solves enterprise data bus tasks, including receipt and processing of data from multiple external systems, data storage for the required period of time, and data return to consumers at a load that is convenient to them.

Arenadata Streaming helps:

  • Build real-time streaming data pipelines for reliable data transfer between systems or apps
  • Build real-time streaming apps for data stream transformation or response
  • Enable fault-tolerant and long-term storage of record streams
ADS is built on Apache Kafka and Apache NiFi and combines the advantages of two system types, ensuring
  • Real-time stream processing of large data volumes
  • Data receipt from various sources
  • Single entry point for all of your data

Arenadata Streaming Architecture


Why Arenadata Streaming

download now
Cost-efficiency
Arenadata Streaming is easy to master as it does not require highly competent administrators.
Data storage period of your choice
Unlike other message brokers that delete information immediately after it has been delivered, ADS allows you to choose the data storage period you need. Arenadata has completed a wide range of different projects: some of our customers analyze website user activity and keep data for one or two minutes, while others need to access data via Arenadata Streaming for a few months.
Versatility
ADS is a universal tool to address real-time streaming data processing challenges.
Any data formats
Arenadata Streaming accepts and effectively processes both structured and unstructured data and can handle hundreds of thousands of messages per minute.
Scalability
System flexibility and scalability help it grow along with your needs, adapting to current tasks. Thus, you can always add/remove servers to/from the cluster without stopping the system.
Minimum risk of data loss
While other message brokers only store information until it is requested by users, ADS makes information available during the entire storage period specified, even if data is taken away at some point. Moreover, multiple systems can access data simultaneously and ADS allows for data rereading if any problem occurs in target systems.
Configuration flexibility
ADS may be configured to ensure either high availability (when data consistency is not crucial) or consistent data storage. Moreover, ADS guarantees exactly-once delivery semantics, when each message and delivery order are critical to business.
Security
The system supports creating data streams with access management preventing unauthorized access to business-critical information.
Load balancing
ADS unites consumers into groups, so that several of them can read data from the same topic, quickly and simultaneously. Consumers do not reread data that have been already read by one of their group members, because data stored in topics are distributed across partitions to improve system performance. If one or several consumers stop working then other group members will receive their partitions.
Integration
A wide range of APIs for integration with other third-party systems.

Arenadata Streaming in Multi-cloud

Our customers are free to deploy ADS on bare metal, in cloud, heterogeneous IT infrastructure (popular option today), multi-clouds, or even distributed infrastructures with good connectivity.

Состав компонентов Arenadata Streaming

ADS 3.6.2.2
ADS 3.7.2.1
ADS 3.9.0.1
ADS 3.9.1.1
ADS 3.9.1.2
ADCM

Arenadata Cluster Manager — универсальный оркестратор гибридного ландшафта

Arenadata Cluster Manager — универсальный оркестратор гибридного ландшафта

Released
ADS 3.6.2.2
latest
ADS 3.7.2.1
latest
ADS 3.9.0.1
latest
In Development
ADS 3.9.1.1
latest
Scheduled
ADS 3.9.1.2
latest
latest
latest
latest
latest
latest
Kafka

Распределённая платформа потоковой передачи для управления приёмом, обработкой и анализом потоков данных в режиме реального времени

Распределённая платформа потоковой передачи для управления приёмом, обработкой и анализом потоков данных в режиме реального времени

Released
ADS 3.6.2.2
3.6.2
ADS 3.7.2.1
3.7.2
ADS 3.9.0.1
3.9.0
In Development
ADS 3.9.1.1
3.9.1
Scheduled
ADS 3.9.1.2
3.9.1
3.6.2
3.7.2
3.9.0
3.9.1
3.9.1
Kafka Connect

Платформа интеграции для перемещения данных между Kafka и другими системами. Предоставляет масштабируемую и отказоустойчивую инфраструктуру для приёма и экспорта данных в Kafka и из неё

Платформа интеграции для перемещения данных между Kafka и другими системами. Предоставляет масштабируемую и отказоустойчивую инфраструктуру для приёма и экспорта данных в Kafka и из неё

Released
ADS 3.6.2.2
3.6.2
ADS 3.7.2.1
3.7.2
ADS 3.9.0.1
3.9.0
In Development
ADS 3.9.1.1
3.9.1
Scheduled
ADS 3.9.1.2
3.9.1
3.6.2
3.7.2
3.9.0
3.9.1
3.9.1
CMAK

Веб-инструмент для управления кластерами Kafka

Веб-инструмент для управления кластерами Kafka

Released
ADS 3.6.2.2
3.1.2
ADS 3.7.2.1
ADS 3.9.0.1
In Development
ADS 3.9.1.1
Scheduled
ADS 3.9.1.2
3.1.2
Schema Registry

Централизованный репозиторий для хранения и управления схемами данных, создаваемых и потребляемых Kafka. Позволяет определять, развивать и совместно использовать схемы в различных приложениях и системах

Централизованный репозиторий для хранения и управления схемами данных, создаваемых и потребляемых Kafka. Позволяет определять, развивать и совместно использовать схемы в различных приложениях и системах

Released
ADS 3.6.2.2
7.6.2
ADS 3.7.2.1
7.7.2
ADS 3.9.0.1
7.9.0
In Development
ADS 3.9.1.1
7.9.1
Scheduled
ADS 3.9.1.2
7.9.1
7.6.2
7.7.2
7.9.0
7.9.1
7.9.1
KsqlDB

Потоковый механизм SQL для обработки потоков данных в реальном времени. Позволяет запрашивать, объединять и фильтровать данные по мере их прохождения через систему, упрощая создание конвейеров данных без сложного программирования

Потоковый механизм SQL для обработки потоков данных в реальном времени. Позволяет запрашивать, объединять и фильтровать данные по мере их прохождения через систему, упрощая создание конвейеров данных без сложного программирования

Released
ADS 3.6.2.2
7.6.2
ADS 3.7.2.1
7.7.2
ADS 3.9.0.1
7.9.0
In Development
ADS 3.9.1.1
7.9.1
Scheduled
ADS 3.9.1.2
7.9.1
7.6.2
7.7.2
7.9.0
7.9.1
7.9.1
Kafka REST

Простой и масштабируемый инструмент интеграции Kafka с другими системами и технологиями, поддерживающими RESTful API

Простой и масштабируемый инструмент интеграции Kafka с другими системами и технологиями, поддерживающими RESTful API

Released
ADS 3.6.2.2
7.6.2
ADS 3.7.2.1
7.7.2
ADS 3.9.0.1
7.9.0
In Development
ADS 3.9.1.1
7.9.1
Scheduled
ADS 3.9.1.2
7.9.1
7.6.2
7.7.2
7.9.0
7.9.1
7.9.1
Zookeeper

Служба распределённой координации, используемая для управления конфигурацией и координацией кластеров. Помогает обеспечить высокую доступность и отказоустойчивость в кластерах потоковой передачи

Служба распределённой координации, используемая для управления конфигурацией и координацией кластеров. Помогает обеспечить высокую доступность и отказоустойчивость в кластерах потоковой передачи

Released
ADS 3.6.2.2
3.8.4
ADS 3.7.2.1
3.8.4
ADS 3.9.0.1
3.8.4
In Development
ADS 3.9.1.1
3.8.4
Scheduled
ADS 3.9.1.2
3.8.4
3.8.4
3.8.4
3.8.4
3.8.4
3.8.4
NiFi

Инструмент интеграции для автоматизации потоков данных между различными системами и технологиями. Предоставляет визуальный интерфейс для проектирования и настройки потоков данных

Инструмент интеграции для автоматизации потоков данных между различными системами и технологиями. Предоставляет визуальный интерфейс для проектирования и настройки потоков данных

Released
ADS 3.6.2.2
1.26.0
ADS 3.7.2.1
1.26.0
ADS 3.9.0.1
1.28.0
In Development
ADS 3.9.1.1
1.28.0
Scheduled
ADS 3.9.1.2
1.28.0
1.26.0
1.26.0
1.28.0
1.28.0
1.28.0
NiFi 2

Инструмент интеграции для автоматизации потоков данных между различными системами и технологиями. Предоставляет визуальный интерфейс для проектирования и настройки потоков данных

Инструмент интеграции для автоматизации потоков данных между различными системами и технологиями. Предоставляет визуальный интерфейс для проектирования и настройки потоков данных

Released
ADS 3.6.2.2
ADS 3.7.2.1
ADS 3.9.0.1
In Development
ADS 3.9.1.1
Scheduled
ADS 3.9.1.2
2.5.0
2.5.0
NiFi Registry

Система контроля версий и управления для управления потоками данных и другими активами, созданными с помощью NiFi. Предоставляет центральный репозиторий для хранения и управления потоками, шаблонами и другими артефактами NiFi

Система контроля версий и управления для управления потоками данных и другими активами, созданными с помощью NiFi. Предоставляет центральный репозиторий для хранения и управления потоками, шаблонами и другими артефактами NiFi

Released
ADS 3.6.2.2
1.26.0
ADS 3.7.2.1
1.26.0
ADS 3.9.0.1
1.28.0
In Development
ADS 3.9.1.1
1.28.0
Scheduled
ADS 3.9.1.2
1.28.0
1.26.0
1.26.0
1.28.0
1.28.0
1.28.0
MiNiFi

Облегчённый инструмент сбора данных для сбора и предварительной обработки данных на сетевой периферии. Предназначен для работы на устройствах с ограниченными ресурсами (датчики и устройства IoT)

Облегчённый инструмент сбора данных для сбора и предварительной обработки данных на сетевой периферии. Предназначен для работы на устройствах с ограниченными ресурсами (датчики и устройства IoT)

Released
ADS 3.6.2.2
1.26.0
ADS 3.7.2.1
1.26.0
ADS 3.9.0.1
1.28.0
In Development
ADS 3.9.1.1
1.28.0
Scheduled
ADS 3.9.1.2
1.28.0
1.26.0
1.26.0
1.28.0
1.28.0
1.28.0
C2 Server

Сервер для конфигурирования агентов MiNiFi, управляет версионными классами приложений, предоставляя REST-подобный API-интерфейс, к которому подключаются агенты для обновления конфигураций

Сервер для конфигурирования агентов MiNiFi, управляет версионными классами приложений, предоставляя REST-подобный API-интерфейс, к которому подключаются агенты для обновления конфигураций

Released
ADS 3.6.2.2
1.26.0
ADS 3.7.2.1
1.26.0
ADS 3.9.0.1
1.28.0
In Development
ADS 3.9.1.1
1.28.0
Scheduled
ADS 3.9.1.2
1.28.0
1.26.0
1.26.0
1.28.0
1.28.0
1.28.0
Kerberos

Сетевой протокол аутентификации

Сетевой протокол аутентификации

Released
ADS 3.6.2.2
latest
ADS 3.7.2.1
latest
ADS 3.9.0.1
latest
In Development
ADS 3.9.1.1
latest
Scheduled
ADS 3.9.1.2
latest
latest
latest
latest
latest
latest
End of Support (July 2025)
ADS 2.8.x
Released
ADS 3.6.2.2
ADS 3.7.2.1
ADS 3.9.0.1
In Development
ADS 3.9.1.1
Scheduled
ADS 3.9.1.2
Deprecated

Thank you for contacting us!

We will process your request as soon as possible and contact you.

Learn more about Arenadata Streaming

To learn more about or test Arenadata Streaming, please fill in the form. Our specialists will tell you in detail how your business can benefit from our products.
Attention! Check the fields you filled in are correct

We use cookies to enhance your experience, for analytics and to show you offers tailored to your interests on our site and third party sites. We may share your information with our advertising and analytics partners. By clicking "Accept", you agree to our use of cookies and similar technologies.