Эксплуатация Arenadata Streaming (Kafka, NiFi)

записаться на курс

Курс «Эксплуатация Arenadata Streaming (Kafka, NiFi)»

Курс «Эксплуатация Arenadata Streaming (Kafka, NiFi)» − четырёхдневный практический курс по администрированию, установке и настройке безопасности кластеров Kafka и NiFi, который направлен на изучение ключевых аспектов работы с платформой Arenadata Streaming, включая принципы обеспечения безопасности потоковых данных. Курс поможет получить практические навыки по развертыванию, администрированию и пост-настройке безопасности кластера Arenadata Streaming.
программа курса
Что представляет собой курс
Аудитория курса
Сертификация
Что представляет собой курс
Это четырехдневный практический курс. В рамках которого участники получат теоретические знания и практический опыт по:
  • подготовке окружения и установке Arenadata Streaming, Arenadata Streaming Control и Arenadata Platform Security;
  • архитектуре и инструментам Apache Kafka (Consumers, Producers, Topics, Kafka Connect, MirrorMaker, Kafka REST Proxy, ksqlDB);
  • Arenadata Streaming Control (ADS Control);
  • архитектуре, администрированию и эксплуатации Apache NiFi;
  • обеспечению информационной безопасности для кластера Arenadata Streaming с применением инструментов Arenadata Platform Security.
Аудитория курса
Аудитория курса включает в себя IT-специалистов, которые хотят повысить свою квалификацию в области управления потоковыми данными и обеспечения безопасности кластеров Apache Kafka и Apache NiFi в составе платформы Arenadata Streaming. Курс предназначен для системных администраторов, специалистов по информационной безопасности и разработчиков в области больших данных. Курс будет полезен как для начинающих, так и для опытных специалистов, стремящихся расширить свои знания и умения в области администрирования и обслуживания распределенной системы потоковой обработки данных − Arenadata Streaming.

Слушателям необходимо обладать следующим уровнем подготовки:
  • знания и навыки работы с командами и сервисами Linux-систем (командная строка, файловая система, текстовые редакторы vi, vim, nano и др.);
  • опыт работы с SQL.
    • Сертификация
    • Слушателям, успешно прошедшим сертификацию, выдается именной вендорский сертификат со статусом сертифицированного специалиста.
    • Слушателям курса предоставляется 2 попытки для прохождения проверки знаний.

    Программа

    Модуль 1. Обзор Arenadata Enterprise Data Platform и Arenadata Streaming
    • Экосистема EDP: Arenadata Streaming, Arenadata Hadoop, Arenadata DB, Arenadata QuickMarts, Arenadata Postgres, Arenadata Cluster Manager.
    • Arenadata Streaming: основные компоненты и назначение (Kafka Broker, Kafka Connect Worker, Kafka-Manager, Kafka REST Proxy, ksqlDB Client, ksqlDB, Schema-Registry, NiFi Registry, NiFi Server, MiNiFi, ZooKeeper).
    • Arenadata Streaming Control.
    • Arenadata Platform Security.
    Модуль 2. Подготовка окружения и установка ADS: ZooKeeper, Apache Kafka, Apache NiFi
    • Планирование кластера.
    • Настройка параметров окружения.
    • Введение в Arenadata Cluster Manager: основные понятия, компоненты и возможности, развертывание.
    • Установка и настройка ADS: планирование и первичная конфигурация кластера, мониторинг, установка Arenadata Streaming, конфигурирование сервисов (ZooKeeper, Apache Kafka, Apache NiFi).
    • Мониторинг ADS: архитектура кластера мониторинга. Мониторинг ADS: Kafka, NiFi. Встроенный мониторинг NiFi.
    Модуль 3. Архитектура и инструменты Apache Kafka
    • Базовые концепции и объекты Kafka.
    • Topics Kafka.
    • Zookeeper. Выбор лидера.
    • Producers Kafka.
    • Consumers Kafka.
    Модуль 4. Kafka Connect
    • Основные понятия и инструменты.
    • FileStream Connectors.
    Модуль 5. Kafka REST Proxy, ksqlDB
    • Основные возможности и примеры использования.
    Модуль 6. Мультикластерные архитектуры
    • Топология мультикластерной репликации.
    • Настройка MirrorMaker, Mirror Connectors.
    Модуль 7. Архитектура и инструменты Apache NiFi
    • Обзор Apache NiFi.
    • Создание, настройка и управление процессорами, процессорными группами.
    • Flow Files и атрибуты.
    • Подключение источников (File, Apache Kafka, СУБД (ADB)).
    • FlowFile Repository, Content Repository, Provenance Repository: детальное изучение.
    Модуль 8. Администрирование и эксплуатация Apache NiFi
    • Инструменты мониторинга и администрирования.
    • Горизонтальное масштабирование и отказоустойчивость NiFi.
    • Управление репликацией и балансировкой нагрузки.
    • Apache NiFi Registry версионность и поддержка production deployment (CI/CD).
    Модуль 9. Arenadata Streaming Control (ADS Control)
    • Планирование кластера, настройка параметров окружения и установка, обзор UI.
    • Основные операции ADS Control: управление и добавление коннекторов (FileStreamSinkConnector, FileStreamSourceConnector, MirrorCheckpointConnector, MirrorHeartbeatConnector, MirrorSourceConnector, пользовательских, Debezium).
    Модуль 10. Управление информационной безопасностью кластера ADS
    • Установка и настройка Arenadata Platform Security (ADPS).
    • Керберизация ADS/ADPS с MS Active Directory. Kerberos-аутентификация для web-интерфейсов компонентов. Настройка SPNEGO для браузеров.
    • Настройка LDAP sync source для Ranger User synchronizer.
    • Настройка LDAP/AD auth для Ranger Admin.
    • Присоединение узлов к Active Directory (SSSD/realmd).
    • Настройка SSL ADS и ADPS.
    • Настройка авторизации.
    Итоговое тестирование

      Даты
      ближайших
      курсов

      • 8-11 Декабря осталось мало мест!

      Спасибо, что написали нам!

      Мы обработаем заявку и свяжемся с вами в ближайшее время.

      Будем рады помочь!

      Отправьте ваш вопрос через форму ниже, и наши специалисты свяжутся с вами в ближайшее время.

      Корпоративная группа *
      Фамилия *
      Имя *
      Эл. почта *
      Телефон *
      Наименование компании *
      Опишите ваш вопрос
      ошибка! проверьте правильно ли вы заполнили поля

      Эксплуатация Arenadata Streaming (Kafka, NiFi)

      записаться на курс

      Этот сайт использует cookie-файлы и другие технологии, чтобы помочь вам в навигации, а также предоставить лучший пользовательский опыт, анализировать использование наших продуктов и услуг, повысить качество рекламных и маркетинговых активностей.