Четырёхдневный практический курс по администрированию, установке и настройке безопасности кластеров Kafka и NiFi, который направлен на изучение ключевых аспектов работы с платформой Arenadata Streaming, включая принципы обеспечения безопасности потоковых данных. Курс поможет получить практические навыки по развертыванию, администрированию и пост-настройке безопасности кластера Arenadata Streaming. Курс предназначен для системных администраторов, специалистов по информационной безопасности и разработчиков в области больших данных.
| Форма обучения | Академ. часы | Ближайшая группа | Цена |  |
|
| Частные лица | Организации | ||||
| Очная с применением ДОТ. Режим обучения: пн-пт | 32 |
23.06.2026
выбрать другую дату
|
161 040 руб. | 161 040 руб. |
|
Модуль 1.
Обзор Arenadata Enterprise Data Platform и Arenadata Streaming
· Экосистема EDP: Arenadata Streaming, Arenadata Hyperwave, Arenadata DB, Arenadata QuickMarts, Arenadata Postgres, Arenadata Cluster Manager
· Arenadata Streaming: основные компоненты и назначение (Kafka Broker, Kafka Connect Worker, Kafka REST Proxy, ksqlDB, Schema-Registry, NiFi Registry, NiFi Server, MiNiFi, ZooKeeper)
· Arenadata Streaming Control
· Arenadata Platform Security
Модуль 2.
Подготовка окружения и установка ADS: ZooKeeper/KRaft, Apache Kafka, Monitoring, ADS Control
· Планирование кластера
· Настройка параметров окружения:
o Подготовка к установке. Настройка сети и DNS. Монтирование и настройка файловой системы.
o Лабораторная работа
· Введение в Arenadata Cluster Manager: основные понятия, компоненты и возможности, развертывание:
o Лабораторная работа (опционально)
· Установка и настройка ADS: планирование и первичная конфигурация кластера, мониторинг, установка Arenadata Streaming, конфигурирование сервисов (ZooKeeper/KRaft, Apache Kafka):
o Лабораторная работа
· Мониторинг ADS Prometheus: архитектура сервиса мониторинга. Настройка/добавление JMX-метрик:
o Лабораторная работа
· Arenadata Streaming Control (ADS Control): планирование кластера, настройка параметров окружения и установка, обзор UI
Модуль 3.
Архитектура и инструменты Apache Kafka
· Базовые концепции и объекты Kafka: Consumers, Producers, Topics, Partitions, Segments, Replication, Offset, Messages, consumer groups, Brokers, Schemas
· Topics Kafka:
o Основные операции (создание, управление, мониторинг, console CLI, partitions, replication, compaction, retension).
o Гарантии надежности Kafka (доставка/потребление).
o ADS Control: базовые операции (View/Produce Messages, Topics, Brokers, Consumer groups).
o Лабораторная работа
· Контроллер Kafka. ZooKeeper/KRaft.
· Producers Kafka:
o Настройка Producers.
o Console Producer
· Consumers Kafka:
o Настройка Consumers
o Сonsumer groups, ребалансировка разделов.
o Console Consumer
· Изменение параметров компонентов и объетов Kafka:
o ADS Control.
o Console CLI.
o Лабораторная работа.
· Kafka Cruise Control:
o Назначение, архитектура и компоненты (Goals, Monitor, Analyzer, Detector, Metrics).
o Лабораторная работа (опционально)
· Schema Registry:
o Schema compatibility.
o Настройка и управление в ADS Control
· Kafka Tiered Storage:
o Основные возможности. Настройка
Модуль 4.
Kafka Connect
· Основные понятия, компоненты и инструменты. API. Установка Plugin's Connectors
· FileStream Connectors:
o Лабораторная работа
· Мультикластерные архитектуры (MirrorMaker, Mirror Connectors)
· ADS Control: управление и добавление коннекторов (MirrorCheckpointConnector, MirrorHeartbeatConnector, MirrorSourceConnector, пользовательских, Debezium):
o Mirror Maker connector.
o CDC Debezium.
o Kafka ADB Connectors.
o Лабораторные работы
Модуль 5.
Kafka REST Proxy, ksqlDB
· Основные возможности и примеры использования
Модуль 6.
Управление информационной безопасностью кластера ADS
· Механизмы аутентификации/авторизации в Kafka. Шифрование. kTLS
· Установка и настройка Arenadata Platform Security (ADPS):
o Основные этапы установки.Подготовка инфраструктуры. Распределение компонент ADPS.
o Лабораторная работа
· Керберизация ADS/ADPS/ADS Control с MS Active Directory:
o Лабораторная работа
· Настройка LDAP sync source для Ranger User synchronizer:
o Лабораторная работа
· Настройка LDAP/AD auth для Ranger Admin:
o Лабораторная работа
· Настройка LDAP/AD auth для ADS Control:
o Лабораторная работа
· Настройка network authentication/domain membership для узлов на примере Active Directory (SSSD/realmd):
o Лабораторная работа
· Настройка SSL ADS/ADPS/ADS Control:
o Сертификаты и Центры сертификации.
o Шифрование данных. Основные этапы настройки SSL.
o Лабораторная работа
· Настройка авторизации:
o Apache Kafka (ACL, Ranger Plugin)
o ADS Control Service (Ranger Plugin)
o Лабораторная работа
Итоговое тестирование.
Раздел не найден.
© 2026 
