Apache NiFi for Developers

• Doświadczenie w programowaniu Java.
• Doświadczenie z Maven.

Publiczność

• Programiści
• Inżynierowie danych

Apache NiFi (Hortonworks DataFlow) to zintegrowana logistyka danych w czasie rzeczywistym i prosta platforma przetwarzania zdarzeń, która umożliwia przenoszenie, śledzenie i automatyzację danych między systemami. Jest napisana przy użyciu programowania opartego na przepływach i zapewnia internetowy interfejs użytkownika do zarządzania przepływami danych w czasie rzeczywistym.

W tym prowadzonym przez instruktora szkoleniu na żywo uczestnicy poznają podstawy programowania opartego na przepływach, opracowując szereg rozszerzeń demonstracyjnych, komponentów i procesorów przy użyciu Apache NiFi.

Pod koniec tego szkolenia uczestnicy będą w stanie

• Zrozumieć architekturę NiFi i koncepcje przepływu danych.
• Rozwijać rozszerzenia przy użyciu NiFi i interfejsów API innych firm.
• Rozwijać własny procesor Apache Nifi.
• Pozyskiwać i przetwarzać dane w czasie rzeczywistym z różnych i nietypowych formatów plików i źródeł danych.

Format kursu

• Interaktywny wykład i dyskusja.
• Wiele ćwiczeń i praktyki.
• Praktyczne wdrożenie w środowisku laboratoryjnym na żywo.

Opcje dostosowywania kursu

• Aby poprosić o spersonalizowane szkolenie dla tego kursu, skontaktuj się z nami w celu ustalenia szczegółów.

Wprowadzenie

• Dane w spoczynku a dane w ruchu

Przegląd narzędzi i technologii Big Data

• Hadoop (HDFS i MapReduce) oraz Spark

Instalacja i konfiguracja NiFi

Przegląd architektury NiFi

Podejścia programistyczne

• Narzędzia do tworzenia aplikacji i sposób myślenia
• Narzędzia i sposób myślenia w zakresie wyodrębniania, przekształcania i ładowania (ETL)

Rozważania projektowe

Komponenty, zdarzenia i wzorce procesorów

Ćwiczenie: Strumieniowe przesyłanie danych do HDFS

Obsługa błędów

Usługi kontrolera

Ćwiczenie: Pozyskiwanie danych z urządzeń IoT przy użyciu internetowych interfejsów API

Ćwiczenie: Tworzenie niestandardowego procesora Apache Nifi przy użyciu JSON

Testowanie i rozwiązywanie problemów

Przyczynianie się do Apache NiFi

Podsumowanie i wnioski