Эксплуатация Arenadata Streaming (Kafka)
Курс «Эксплуатация Arenadata Streaming (Kafka)» поможет получить практические навыки по развертыванию, администрированию и пост-настройке безопасности кластера Arenadata Streaming
6 октября 2026
4 дня
32 часа
Доступные даты

О курсе
Четырёхдневный практический курс по администрированию, установке и настройке безопасности кластера Kafka, который направлен на изучение ключевых аспектов работы с платформой Arenadata Streaming, включая принципы обеспечения безопасности потоковых данных.
Продукты
Технологии
Чему научится участник
На курсе участники изучат и отработают на практике:
- подготовку окружения и установку Arenadata Streaming, Arenadata Streaming Control и Arenadata Platform Security;
- архитектуру и инструменты Apache Kafka: Consumers, Producers, Topics, Kafka Cruise Control, Kafka Connect, MirrorMaker, Kafka REST Proxy и ksqlDB;
- работу с Arenadata Streaming Control (ADS Control);
- обеспечение информационной безопасности кластера Arenadata Streaming с помощью инструментов Arenadata Platform Security.
Аудитория курса
Аудитория курса включает в себя IT-специалистов, которые хотят повысить свою квалификацию в области управления потоковыми данными и обеспечения безопасности кластера Apache Kafka в составе платформы Arenadata Streaming. Курс предназначен для системных администраторов, специалистов по информационной безопасности и разработчиков в области больших данных. Курс будет полезен как для начинающих, так и для опытных специалистов, стремящихся расширить свои знания и умения в области администрирования и обслуживания распределенной системы потоковой обработки данных − Arenadata Streaming.
Слушателям необходимо обладать следующим уровнем подготовки:
- знания и навыки работы с командами и сервисами Linux-систем (командная строка, файловая система, текстовые редакторы vi, vim, nano и др.);
- опыт работы с SQL.
Сертификация
Все курсы заканчиваются экзаменом, при успешной сдаче которого слушателю выдается вендорский сертификат с названием курса и Ф. И. О. обучающегося.
Выпускнику центра присваивается статус Arenadata Certified Specialist.
В случае изучения нескольких курсов специалисту присваивается дополнительный грейд.

Программа обучения
Модуль 1. Обзор Arenadata Enterprise Data Platform и Arenadata Streaming
- Экосистема EDP: Arenadata Streaming, Arenadata Hyperwave, Arenadata DB, Arenadata QuickMarts, Arenadata Postgres, Arenadata Cluster Manager
- Arenadata Streaming: основные компоненты и назначение (Kafka Broker, Kafka Connect Worker, Kafka REST Proxy, ksqlDB, Schema-Registry, NiFi Registry, NiFi Server, MiNiFi, ZooKeeper)
- Arenadata Streaming Control
- Arenadata Platform Security
Модуль 2. Подготовка окружения и установка ADS: ZooKeeper/KRaft, Apache Kafka, Monitoring, ADS Control
- Планирование кластера
- Настройка параметров окружения: Подготовка к установке. Настройка сети и DNS. Монтирование и настройка файловой системы Лабораторная работа
- Подготовка к установке. Настройка сети и DNS. Монтирование и настройка файловой системы
- Лабораторная работа
- Введение в Arenadata Cluster Manager: основные понятия, компоненты и возможности, развертывание: Лабораторная работа (опционально)
- Лабораторная работа (опционально)
- Установка и настройка ADS: планирование и первичная конфигурация кластера, мониторинг, установка Arenadata Streaming, конфигурирование сервисов (ZooKeeper/KRaft, Apache Kafka): Лабораторная работа (опционально)
- Лабораторная работа (опционально)
- Мониторинг ADS Prometheus: архитектура сервиса мониторинга. Настройка/добавление JMX-метрик: Лабораторная работа (опционально)
- Лабораторная работа (опционально)
- Arenadata Streaming Control (ADS Control): планирование кластера, настройка параметров окружения и установка, обзор UI
Модуль 3. Архитектура и инструменты Apache Kafka
- Базовые концепции и объекты Kafka: Consumers, Producers, Topics, Partitions, Segments, Replication, Offset, Messages, consumer groups, Brokers, Schemas
- Topics Kafka: Основные операции (создание, управление, мониторинг, console CLI, partitions, replication, compaction, retension) Гарантии надежности Kafka (доставка/потребление) ADS Control: базовые операции (View/Produce Messages, Topics, Brokers, Consumer groups) Лабораторная работа.
- Основные операции (создание, управление, мониторинг, console CLI, partitions, replication, compaction, retension)
- Гарантии надежности Kafka (доставка/потребление)
- ADS Control: базовые операции (View/Produce Messages, Topics, Brokers, Consumer groups)
- Лабораторная работа.
- Контроллер Kafka. ZooKeeper/KRaft
- Producers Kafka: Настройка Producers Console Producer
- Настройка Producers
- Console Producer
- Consumers Kafka: Настройка Consumers Сonsumer groups, ребалансировка разделов Console Consumer
- Настройка Consumers
- Сonsumer groups, ребалансировка разделов
- Console Consumer
- Изменение параметров компонентов и объектов Kafka: ADS Control Console CLI Лабораторная работа
- ADS Control
- Console CLI
- Лабораторная работа
- Kafka Cruise Control: Назначение, архитектура и компоненты (Goals, Monitor, Analyzer, Detector, Metrics) Лабораторная работа (опционально)
- Назначение, архитектура и компоненты (Goals, Monitor, Analyzer, Detector, Metrics)
- Лабораторная работа (опционально)
- Schema Registry: Schema compatibility Настройка и управление в ADS Control
- Schema compatibility
- Настройка и управление в ADS Control
- Kafka Tiered Storage: Основные возможности. Настройка
- Основные возможности. Настройка
Модуль 4. Kafka Connect
- Основные понятия, компоненты и инструменты. API. Установка Plugin's Connectors
- FileStream Connectors: Лабораторная работа
- Лабораторная работа
- Мультикластерные архитектуры (MirrorMaker, Mirror Connectors)
- ADS Control: управление и добавление коннекторов (MirrorCheckpointConnector, MirrorHeartbeatConnector, MirrorSourceConnector, пользовательских, Debezium): Mirror Maker connector CDC Debezium Kafka ADB Connectors Лабораторные работы
- Mirror Maker connector
- CDC Debezium
- Kafka ADB Connectors
- Лабораторные работы
Модуль 5. Kafka REST Proxy, ksqlDB
- Основные возможности и примеры использования
Модуль 6. Управление информационной безопасностью кластера ADS
- Механизмы аутентификации/авторизации в Kafka. Шифрование. kTLS
- Установка и настройка Arenadata Platform Security (ADPS): Основные этапы установки. Подготовка инфраструктуры. Распределение компонент ADPS Лабораторная работа
- Основные этапы установки. Подготовка инфраструктуры. Распределение компонент ADPS
- Лабораторная работа
- Керберизация ADS/ADPS/ADS Control с MS Active Directory: Лабораторная работа
- Лабораторная работа
- Настройка LDAP sync source для Ranger User synchronizer: Лабораторная работа
- Лабораторная работа
- Настройка LDAP/AD auth для Ranger Admin: Лабораторная работа
- Лабораторная работа
- Настройка LDAP/AD auth для ADS Control: Лабораторная работа
- Лабораторная работа
- Настройка network authentication/domain membership для узлов на примере Active Directory (SSSD/realmd): Лабораторная работа
- Лабораторная работа
- Настройка SSL ADS/ADPS/ADS Control: Сертификаты и Центры сертификации Шифрование данных. Основные этапы настройки SSL Лабораторная работа
- Сертификаты и Центры сертификации
- Шифрование данных. Основные этапы настройки SSL
- Лабораторная работа
- Настройка авторизации: Apache Kafka (ACL, Ranger Plugin) ADS Control Service (Ranger Plugin) Лабораторная работа
- Apache Kafka (ACL, Ranger Plugin)
- ADS Control Service (Ranger Plugin)
- Лабораторная работа
Учебный материал и обратная связь
Во время обучения слушатели могут общаться с преподавателем как голосом, так и в рабочем чате, расположенном на той же платформе, что и вебинар.
Лабораторные стенды доступны во время занятий, а также вечером и в выходные дни при необходимости.
При желании можно дополнительно приобрести учебную лицензию продуктов Arenadata для повторения материала и тренировки.
Часто задаваемые вопросы
Собрали ответы на самые популярные вопросы.
Хотите записаться на курс?
Или задайте свой вопрос, чтобы узнать подробнее о наших курсах.


