ВЕБИНАР

Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты

Курс «Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты» предназначен для получения фундаментальных знаний и практических навыков по установке, конфигурированию и управлению кластерами Arenadata Hyperwave

5 октября 2026

Ближайший старт

5 дней

Длительность

Вебинар

Формат

Доступные даты

05 октября 2026

09 ноября 2026

07 декабря 2026

О курсе

«Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты» — пятидневный курс для системных администраторов, инженеров и DevOps-специалистов, которые хотят получить фундаментальные знания и практические навыки по установке, конфигурированию и управлению кластерами Arenadata Hyperwave.

Продукты

Arenadata Hyperwave

Технологии

Apache Hadoop

Чему научится участник

В его рамках участники получат теоретические знания и практический опыт по:

архитектуре экосистемы Hadoop;
работе с: HDFS; Ozone; SSM (Smart Storage Manager); YARN; ZooKeeper; Arenadata Cluster Manager (ADCM);
планированию инфраструктуры;
настройке сети и файловой системы;
отказоустойчивости и основам мониторинга с использованием Prometheus и Grafana;
установке и первичной настройке кластера;
диагностике и устранению проблем в его работе.

Аудитория курса

Курс актуален системным администраторам и инженерам, которые впервые работают с Hadoop-кластером; специалистам по эксплуатации, DevOps-инженерам; архитекторам инфраструктур данных, желающим понять внутреннее устройство и управление кластерами Arenadata Hyperwave.

Для успешного освоения курса рекомендуется, чтобы слушатель:

имел базовые знания Linux (работа с консолью, файловой системой, пользователями, сетевыми настройками);
понимал основные принципы сетевых взаимодействий (IP-адресация, DNS, SSH, порты);
обладал начальными знаниями об архитектуре распределённых систем и принципах хранения данных;
умел читать и редактировать конфигурационные файлы (YAML, XML, INI);
имел представление о Big Data-концепциях — что такое Data Warehouse, Data Lake, Data Lakehouse, партиционирование данных, отказоустойчивость;
имел базовые знания SQL (SELECT, JOIN, фильтрация, агрегирование);
имел представление о Python на уровне чтения и написания простых скриптов (работа с файлами, логами, API, обработка данных);
желателен (но не обязателен) опыт работы с системами мониторинга (Prometheus, Grafana) или управления кластерами (Ambari, ADCM).

Как проходит курс

Занятия проходят удаленно. Курс проводится в формате вебинара: вас ждет общение с преподавателем, лекционная часть, практические работы на виртуальных машинах и разбор лабораторных работ. Время занятий с 10:00 до 18:00 мск.

Группы набираются в двух форматах:

Корпоративные (заказчик записывает на курс команду от 10 человек, даты занятий согласуются отдельно)
Открытые (смешанные группы, в которые входят представители нескольких компаний, такие занятия проходят по расписанию)

Сертификация

Все курсы заканчиваются экзаменом, при успешной сдаче которого слушателю выдается вендорский сертификат с названием курса и Ф. И. О. обучающегося.

Выпускнику центра присваивается статус Arenadata Certified Specialist.

В случае изучения нескольких курсов специалисту присваивается дополнительный грейд.

Программа обучения

Модуль 1. Введение в экосистему Hadoop

История возникновения Hadoop: Понятия Big Data, Data Lake, Data Warehouse, Data Lakehouse. Arenadata Hyperwave. Ключевые отличия от прошлых версий. История проекта. Основные компоненты и экосистема.
Понятия Big Data, Data Lake, Data Warehouse, Data Lakehouse.
Arenadata Hyperwave. Ключевые отличия от прошлых версий.
История проекта.
Основные компоненты и экосистема.
Основные проекты Hadoop. HDFS, MR, YARN, Hive, Tez, HBase, Phoenix, Solr, Spark, ZooKeeper, Impala, Trino, Ozone, HUE, Kyuubi.
Дистрибутивы Hadoop: Проект ODPi. Arenadata Hyperwave. Проект Ambari. Arenadata Cluster Manager.
Проект ODPi. Arenadata Hyperwave.
Проект Ambari. Arenadata Cluster Manager.
Архитектура кластера Hadoop: HDFS. YARN. Ozone. Отказоустойчивость.
HDFS. YARN. Ozone.
Отказоустойчивость.

Модуль 2. Подготовка окружения к установке Arenadata Hyperwave

Планирование кластера: Типы узлов. Профили нагрузки. Аппаратное обеспечение. Примеры кластеров.
Типы узлов. Профили нагрузки.
Аппаратное обеспечение. Примеры кластеров.
Настройка параметров окружения: Подготовка к установке. Настройка сети и DNS. Лабораторная работа. Монтирование и настройка файловой системы. Лабораторная работа.
Подготовка к установке.
Настройка сети и DNS. Лабораторная работа.
Монтирование и настройка файловой системы. Лабораторная работа.

Модуль 3. Введение в Arenadata Cluster Manager

Основные понятия и компоненты.
Развертывание системы управления. Лабораторная работа.
Подготовка и настройка инфраструктуры с использованием бандла. Лабораторная работа.
Планирование и первичная конфигурация кластера ADH.
Установка кластера ADH. Лабораторная работа.
Мониторинг (Prometheus, Grafana).
Подходы к конфигурированию сервисов экосистемы ADH.
Основные конфигурационные файлы и описание.
Работа с логами сервисов, поиск и выявление проблем работы с сервисами.
Обзор возможностей ADCM. Интерпретация статусов тестов, сервисов в системе управления ADCM.

Модуль 4. Пост-настройка кластера Arenadata Hyperwave: HDFS, YARN

Файловая система HDFS.
Основные операции в HDFS: Работа с файлами и каталогами. Balancer. Распределенное копирование. HttpFS. Лабораторные работы.
Работа с файлами и каталогами. Balancer.
Распределенное копирование. HttpFS. Лабораторные работы.
Обслуживание и диагностика HDFS: DataNodes, NameNodes, HA. HDFS UI. Лабораторная работа.
Политики хранения. Tiering. Erasure Coding. Rack Awareness. Лабораторные работы.
Квоты HDFS
Форматы файлов.
Парадигма Map Reduce.
Архитектура YARN, HA-режим. Работа с YARN UI.
Scheduler YARN. Лабораторная работа.
YARN Preemption - вытеснение ресурсов. Лабораторная работа.
YARN Node Labels - метки узлов. Лабораторная работа.

Модуль 5. ZooKeeper

ZooKeeper. Основные понятия и операции. Работа с ZooKeeper CLI.

Модуль 6. Smart Storage Manager (SSM)

Предпосылки создания, история.
Архитектура SSM, отказоустойчивость.
Концепция правил и действий.
Возможности SSM, примеры операций.
Основные конфигурационные файлы и описание.
Лабораторная работа (перемещение данных).

Модуль 7. Ozone

Назначение и применение Ozone.
Отличие от HDFS, преимущества.
Архитектура и компоненты Ozone, отказоустойчивость.
Установка Ozone.
Структура хранения данных в Ozone (том, бакет, ключ).Основные операции в Ozone. Лабораторная работа.
Основные конфигурационные файлы и описание.
Rack Awareness. Лабораторная работа.

Модуль 8. Итоговое тестирование

Учебный материал и обратная связь

Во время обучения слушатели могут общаться с преподавателем как голосом, так и в рабочем чате, расположенном на той же платформе, что и вебинар.
Лабораторные стенды доступны во время занятий, а также вечером и в выходные дни при необходимости.
При желании можно дополнительно приобрести учебную лицензию продуктов Arenadata для повторения материала и тренировки.

Обучение проходит дистанционно в формате вебинаров. Теория чередуется с лабораторными работами, а стенд разворачивается для каждого участника.

Занятия проводятся с отрывом от производства. Для полнодневного курса стандартное время — с 10:00 до 18:00 мск.

Компания может записать на курс корпоративную группу. Даты и формат такого обучения согласуются отдельно.

Периодически обучение проходит в смешанных открытых группах. Оставьте заявку, и мы расскажем о наборе и свободных местах.

После успешной сдачи итогового тестирования участнику выдается именной вендорский сертификат.

Хотите записаться на курс?

Или задайте свой вопрос, чтобы узнать подробнее о наших курсах.