Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты

02-05 февраля
14-17 апреля
02-05 июня
07-10 июля
04-07 августа
06-09 октября
10-13 ноября
01-04 декабря

Курс «Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты» предназначен для получения фундаментальных знаний и практических навыков по установке, конфигурированию и управлению кластерами Arenadata Hyperwave

Записаться на курс Программа курса Задать вопрос

Преимущества курса

Курс единственного в мире вендора-разработчика открытого дистрибутива Hadoop

Arenadata — единственный вендор, который на базе Apache Hadoop, open-source компонентов и проприетарных решений разрабатывает собственный дистрибутив, адаптированный для корпоративного использования и предназначенный для хранения, обработки и анализа данных любой структуры и объёма.

Только применимые на практике знания

В рамках курса слушатели получат теоретические знания и практический опыт:

  • по планированию и развёртыванию распределённых вычислительных кластеров на базе дистрибутива Arenadata Hyperwave версии 4 и системы управления Arenadata Cluster Manager;
  • работе с сервисами и компонентами платформы Arenadata Hyperwave;
  • мониторингу и оптимизации производительности системы;
  • обслуживанию и аварийному восстановлению узлов кластера и отдельных компонент.

Сертификация

  • Слушателям, успешно прошедшим сертификацию, выдается именной вендорский сертификат.
  • Слушателям курса предоставляется 2 попытки для прохождения проверки знаний.

Что представляет собой курс

«Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты» — четырехдневный курс для системных администраторов, инженеров и DevOps-специалистов, которые хотят получить фундаментальные знания и практические навыки по установке, конфигурированию и управлению кластерами Arenadata Hyperwave.

В его рамках участники получат теоретические знания и практический опыт по:

  • архитектуре экосистемы Hadoop;
  • работе с:
    • HDFS;
    • Ozone;
    • SSM (Smart Storage Manager);
    • YARN;
    • ZooKeeper;
    • Arenadata Cluster Manager (ADCM);
  • планированию инфраструктуры;
  • настройке сети и файловой системы;
  • отказоустойчивости и основам мониторинга с использованием Prometheus и Grafana;
  • установке и первичной настройке кластера;
  • диагностике и устранению проблем в его работе.

Аудитория курса

Курс актуален системным администраторам и инженерам, которые впервые работают с Hadoop-кластером; специалистам по эксплуатации, DevOps-инженерам; архитекторам инфраструктур данных, желающим понять внутреннее устройство и управление кластерами Arenadata Hyperwave.

Как проходит курс

Занятия проходят удаленно. Курс проводится в формате вебинара: вас ждет общение с преподавателем, лекционная часть, практические работы на виртуальных машинах и разбор лабораторных работ. Время занятий с 10:00 до 18:00 мск.

Группы набираются в двух форматах:

  • Корпоративные (заказчик записывает на курс команду от 10 человек, даты занятий согласуются отдельно)
  • Открытые (смешанные группы, в которые входят представители нескольких компаний, такие занятия проходят по расписанию)

Сертификация

  • Слушателям, успешно прошедшим сертификацию, выдается именной вендорский сертификат.
  • Слушателям курса предоставляется 2 попытки для прохождения проверки знаний.
сертификат

Программа обучения

Модуль 1

Введение в экосистему Hadoop

  • История возникновения Hadoop:
    • Понятия Big Data, Data Lake, Data Warehouse, Data Lakehouse.
    • Arenadata Hyperwave. Ключевые отличия от прошлых версий.
    • История проекта.
    • Основные компоненты и экосистема.
  • Основные проекты Hadoop. HDFS, MR, YARN, Hive, Tez, HBase, Phoenix, Solr, Spark, ZooKeeper, Impala, Trino, Ozone, HUE, Kyuubi.
  • Дистрибутивы Hadoop:
    • Проект ODPi. Arenadata Hyperwave.
    • Проект Ambari. Arenadata Cluster Manager.
  • Архитектура кластера Hadoop:
    • HDFS. YARN. Ozone.
    • Отказоустойчивость.
Модуль 2

Подготовка окружения к установке Arenadata Hyperwave

  • Планирование кластера:
    • Типы узлов. Профили нагрузки.
    • Аппаратное обеспечение. Примеры кластеров.
  • Настройка параметров окружения:
    • Подготовка к установке.
    • Настройка сети и DNS. Лабораторная работа.
    • Монтирование и настройка файловой системы. Лабораторная работа.
Модуль 3

Введение в Arenadata Cluster Manager

  • Основные понятия и компоненты.
  • Развертывание системы управления. Лабораторная работа.
  • Подготовка и настройка инфраструктуры с использованием бандла. Лабораторная работа.
  • Планирование и первичная конфигурация кластера ADH.
  • Установка кластера ADH. Лабораторная работа.
  • Мониторинг (Prometheus, Grafana).
  • Подходы к конфигурированию сервисов экосистемы ADH.
  • Основные конфигурационные файлы и описание.
  • Работа с логами сервисов, поиск и выявление проблем работы с сервисами.
  • Обзор возможностей ADCM. Интерпретация статусов тестов, сервисов в системе управления ADCM.
Модуль 4

Пост-настройка кластера Arenadata Hyperwave: HDFS, YARN

  • Файловая система HDFS.
  • Основные операции в HDFS:
    • Работа с файлами и каталогами. Balancer.
    • Распределенное копирование. HttpFS. Лабораторные работы.
  • Обслуживание и диагностика HDFS: DataNodes, NameNodes, HA. HDFS UI. Лабораторная работа.
  • Политики хранения. Tiering. Erasure Coding. Rack Awareness. Лабораторные работы.
  • Компрессия и форматы файлов.
  • Парадигма Map Reduce.
  • Архитектура YARN, HA-режим. Работа с YARN UI.
  • Scheduler YARN. Лабораторная работа.
Модуль 5

Smart Storage Manager (SSM)

  • Предпосылки создания, история.
  • Архитектура SSM, отказоустойчивость.
  • Концепция правил и действий.
  • Возможности SSM, примеры операций.
  • Основные конфигурационные файлы и описание.
  • Лабораторная работа (перемещение данных).
Модуль 6

Ozone

  • Назначение и применение Ozone.
  • Отличие от HDFS, преимущества.
  • Архитектура и компоненты Ozone, отказоустойчивость.
  • Структура хранения данных в Ozone (том, бакет, ключ).
  • Основные операции в Ozone.
  • Основные конфигурационные файлы и описание.
  • Политики хранения, Rack Awareness.
  • Лабораторная работа.
Модуль 7

ZooKeeper

  • ZooKeeper. Основные понятия и операции. Работа с ZooKeeper CLI.

Итоговое тестирование

«Эксплуатация Arenadata Hyperwave. Часть 1: Базовые компоненты»

Ближайший старт:

2-5 Февраля

Длительность:

4 дня

Записаться на курс

Спасибо, что написали нам!

Мы обработаем заявку и свяжемся с вами в ближайшее время.

Будем рады помочь!

Отправьте ваш вопрос через форму ниже, и наши специалисты свяжутся с вами в ближайшее время.

Корпоративная группа *
Фамилия *
Имя *
Должность/Роль в компании *
Эл. почта *
Телефон *
Наименование компании *
Опишите ваш вопрос
ошибка! проверьте правильно ли вы заполнили поля

Остались вопросы?

Если вы не нашли ответа на свой вопрос, вы можете воспользоваться формой обратной связи

хочу спросить

Как проходит обучение

Обучение проходит дистанционно в формате вебинаров. Теория перемежается с лабораторными работами, стенд разворачивается для каждого участника, с преподавателями можно общаться на протяжении всего обучения как голосом, так и в чате.

Занятия проводятся с отрывом от производства.

Время проведения занятий с 10:00 до 18:00 мск, если курс рассчитан на целый день.

Корпоративное обучение

Если ваша компания планирует внедрять решения Arenadata или уже работает с ними, вы можете воспользоваться возможностями корпоративного обучения и записать на интересующий курс команду от десяти человек.

Открытые группы

Периодически обучение проходит в смешанных открытых группах. Если вы планируете обучить менее 10 сотрудников, то смело записывайтесь в одну из них. Ориентироваться можно на расписание ниже.

Оставьте заявку на обучение и мы расскажем вам подробнее о том, как набирается группа и сколько свободных мест осталось.

Что получает слушатель по окончанию занятий

После успешной сдачи итогового тестирования, участникам выдается именной вендорский сертификат.

Хотите записаться на курс?

Да, хочу!

Этот сайт использует cookie-файлы и другие технологии, чтобы помочь вам в навигации, а также предоставить лучший пользовательский опыт, анализировать использование наших продуктов и услуг, повысить качество рекламных и маркетинговых активностей.