ВЕБИНАР

Эксплуатация Arenadata Hyperwave

Курс «Эксплуатация Arenadata Hyperwave» поможет вам получить актуальные знания по работе с компонентами и сервисами универсальной гибридной платформы и успешно применять их на практике

По запросу

Ближайший старт

5 дней

Длительность

Вебинар

Формат

О курсе

«Эксплуатация Arenadata Hyperwave» — 5-дневный практический курс по администрированию, установке и настройке кластера Hadoop под управлением Arenadata Cluster Manager.

Продукты

Arenadata Hyperwave

Технологии

Apache Hadoop

Чему научится участник

В рамках данного курса участники получат теоретические знания и практический опыт:

по планированию и развёртыванию распределённых вычислительных кластеров на базе дистрибутива Arenadata Hyperwave версии 4 и системы управления Arenadata Cluster Manager;
работе с сервисами и компонентами платформы Arenadata Hyperwave;
мониторингу и оптимизации производительности системы;
обслуживанию и аварийному восстановлению узлов кластера и отдельных компонент.

Аудитория курса

Курс будет интересен системным администраторам Hadoop, которые хотят получить знания по работе с компонентами и сервисами универсальной гибридной платформы и продвинутые навыки по установке, конфигурированию, обслуживанию, восстановлению и управлению кластером Hadoop с использованием дистрибутива Arenadata Hyperwave и системы управления Arenadata Cluster Manager.

Как проходит курс

Занятия проходят удаленно с отрывом от производства. Курс проводится в формате вебинара: вас ждет общение с преподавателем, лекционная часть, практические работы на виртуальных машинах и разбор лабораторных работ, сессия вопросов-ответов с практиками из Arenadata. Время занятий с 10:00 до 18:00 мск. Группы набираются в двух форматах:

Корпоративные (заказчик записывает на курс команду от 10 человек, даты занятий согласуются отдельно)
Открытые (смешанные группы, в которые входят представители нескольких компаний, такие занятия проходят по расписанию)

Сертификация

Все курсы заканчиваются экзаменом, при успешной сдаче которого слушателю выдается вендорский сертификат с названием курса и Ф. И. О. обучающегося.

Выпускнику центра присваивается статус Arenadata Certified Specialist.

В случае изучения нескольких курсов специалисту присваивается дополнительный грейд.

Программа обучения

Модуль 1. Приветствие

Модуль 2. Введение в экосистему Hadoop

История возникновения Hadoop.
Понятия BigData, Data Lake.
История проекта.
Основные компоненты и экосистема.
Основные проекты Hadoop. HDFS, MR, YARN, Hive, Tez, HBase, Phoenix, Solr, Spark, Zookeeper, Impala, HUE, Kyuubi.
Дистрибутивы Hadoop.
Проект ODPi. Arenadata Hyperwave.
Проект Ambari. ADCM.
Архитектура кластера Hadoop.
HDFS. YARN.
Отказоустойчивость.

Модуль 3. Подготовка окружения к установке Hadoop

Планирование кластера.
Типы узлов. Профили нагрузки.
Аппаратное обеспечение. Примеры кластеров.
Настройка параметров окружения.
Подготовка к установке.
Настройка сети и DNS. Лабораторная работа.
Монтирование и настройка файловой системы.

Модуль 4. Введение в Arenadata Cluster Manager

Основные понятия и компоненты.
Развертывание системы управления.
Подготовка и настройка инфраструктуры с использованием бандла.
Планирование и первичная конфигурация кластера Hadoop.
Установка и настройка мониторинга.
Установка кластера Hadoop.
Мониторинг.
Подходы к конфигурированию сервисов экосистемы Hadoop.
Основные конфигурационные файлы и описание.
Работа с логами сервисов, поиск и выявление проблем работы с сервисами.
Обзор возможностей ADCM. Интерпретация статусов тестов, сервисов в системе управления ADCM.

Модуль 5. Пост-настройка кластера Hadoop: HDFS, YARN

Файловая система HDFS.
Основные операции в HDFS.
Работа с файлами и каталогами. Balancer.
Распределенное копирование. HttpFS.
Обслуживание и дианостика HDFS: DataNodes, NameNodes, HA. HDFS UI.
Политики хранения. Tiering. Erasure Coding. Rack Awareness.
Компрессия и форматы файлов.
Парадигма Map Reduce.
Архитектура YARN, HA-режим. Работа с YARN UI.
Scheduler YARN.

Модуль 6. Проверка работоспособности кластера

ZooKeeper. Основные понятия и операции. Работа с Zookeeper CLI.
HBase. Основные понятия и примеры операций. Установка и конфигурирование (GC, Memstore, Compression, Load balancing, Flush). High Availability. Работа с утилитами HBase (check, repair).
Phoenix. Основные операции с данными.
Примеры запросов Hive. Основные понятия и примеры операций. Установка и конфигурирование. High Availability HiveServer.
Работа с утилитами Hive (schema-tool). Работа с Tez UI.
Оптимизация запросов Hive.
Impala. Архитектура и конфигурирование.
Spark. Основные понятия и операции.
Установка и конфигурирование. Работа со Spark UI. Примеры кода.
Работа с Livy сервером (REST API).
Kyuubi. Архитектура, подключение и примеры операций. Установка и конфигурирование.
HUE. Установка, конфигурирование и обзор UI.

Модуль 7. Итоговое тестирование

Учебный материал и обратная связь

Во время обучения слушатели могут общаться с преподавателем как голосом, так и в рабочем чате, расположенном на той же платформе, что и вебинар.
Лабораторные стенды доступны во время занятий, а также вечером и в выходные дни при необходимости.
При желании можно дополнительно приобрести учебную лицензию продуктов Arenadata для повторения материала и тренировки.

Обучение проходит дистанционно в формате вебинаров. Теория чередуется с лабораторными работами, а стенд разворачивается для каждого участника.

Занятия проводятся с отрывом от производства. Для полнодневного курса стандартное время — с 10:00 до 18:00 мск.

Компания может записать на курс корпоративную группу. Даты и формат такого обучения согласуются отдельно.

Периодически обучение проходит в смешанных открытых группах. Оставьте заявку, и мы расскажем о наборе и свободных местах.

После успешной сдачи итогового тестирования участнику выдается именной вендорский сертификат.

Хотите записаться на курс?

Или задайте свой вопрос, чтобы узнать подробнее о наших курсах.