Администрирование кластера Apache NiFi

Аудитория: Специалисты по администрированию и сопровождению потоков данных м с использованием Apache NiFi, архитекторы и разработчики.

Предварительный уровень подготовки:

• Начальный опыт работы в Unix
• Начальный опыт работы с Hadoop

Продолжительность: 2 дня, 16 академических часов.

Соотношение теории к практике 50/50

Программа курса

1. Введение в Apache NiFi
   • Архитектура Hadoop Data Flow
   • Архитектура решения и ключевые концепции Apache NiFi :
     • FlowFile
     • processor
     • connector
     • FlowFile Repository
     • Content Repository
     • Provenance Repository
   • Data Lineage и Data Provenance( Data Provenance Events)
   • Функционал NiFi по управлению потоком:
     • гарантированная доставка
     • управление каналом (буферизация, pressure)
     • QoS
     • версионность
2. Администрирование NiFi
   • Установка и настройка кластера Apache NiFi
   • Управление кластером NiFi
   • Создание NiFi DataFlow
   • Добавление процессора, возможности масштабирования, работа с атрибутами и свойствами
   • Процессорные группы (Remote Processor Group)
   • Использование NiFi шаблонов
   • Оптимизация DataFlow
   • Инструменты мониторинга и уведомлений NiFi
   • Apache NiFi Registry версионность и поддержка production deployment
3. Интеграция и масштабирование
   • Вертикальное и горизонтальное масштабирование и отказоустойчивость NiFi
   • Доступные расширения и готовые «из коробки» процессоры и коннекторы
   • Возможности интеграции кластера NiFi (consumer/provider) с Kafka
   • Apache Nifi vs. MiniFi
   • Интеграция Apache Kafka, NiFi, MiNiFi
   • Типовые сценарии/схемы