- Doświadczenie z Python i Apache Kafka
- Znajomość platform przetwarzania strumieniowego
Publiczność
- Inżynierowie danych
- Naukowcy zajmujący się danymi
- Programiści
Apache Spark Streaming to skalowalny, otwarty system przetwarzania strumieniowego, który umożliwia użytkownikom przetwarzanie danych w czasie rzeczywistym z obsługiwanych źródeł. Streaming Spark Streaming umożliwia odporne na uszkodzenia przetwarzanie strumieni danych.
Szkolenie na żywo prowadzone przez instruktora (na miejscu lub zdalnie) jest przeznaczone dla inżynierów danych, naukowców zajmujących się danymi i programistów, którzy chcą korzystać z funkcji Spark Streaming w przetwarzaniu i analizowaniu danych w czasie rzeczywistym.
Pod koniec tego szkolenia uczestnicy będą mogli używać Spark Streaming do przetwarzania strumieni danych na żywo do użytku w bazach danych, systemach plików i pulpitach nawigacyjnych na żywo.
Format kursu
- Interaktywny wykład i dyskusja.
- Wiele ćwiczeń i praktyki.
- Praktyczne wdrożenie w środowisku laboratorium na żywo.
Opcje dostosowywania kursu
- Aby poprosić o spersonalizowane szkolenie dla tego kursu, skontaktuj się z nami w celu ustalenia szczegółów.
Wprowadzenie
Przegląd funkcji i architektury Spark Streaming
- Obsługiwane źródła danych
- Podstawowe interfejsy API
Przygotowanie środowiska
- Zależności
- Spark i kontekst przesyłania strumieniowego
- Łączenie z Kafką
Przetwarzanie wiadomości
- Parsowanie wiadomości przychodzących jako JSON
- Procesy ETL
- Uruchamianie kontekstu przesyłania strumieniowego
Wykonywanie Windowed Stream Processing
- Interwał slajdów
- Konfiguracja dostarczania punktu kontrolnego
- Uruchamianie środowiska
Prototypowanie kodu przetwarzania
- Łączenie się z tematem Kafka
- Pobieranie JSON ze źródła danych przy użyciu Paw
- Wariacje i dodatkowe przetwarzanie
Przesyłanie strumieniowe kodu
- Zmienne sterujące zadaniami
- Definiowanie wartości do dopasowania
- Funkcje i warunki
Pozyskiwanie danych wyjściowych strumienia
- Liczniki
- Dane wyjściowe Kafka (dopasowane i niedopasowane)
Rozwiązywanie problemów
Podsumowanie i wnioski
United Arab Emirates - Spark Streaming with Python and Kafka
Qatar - Spark Streaming with Python and Kafka
Egypt - Spark Streaming with Python and Kafka
Saudi Arabia - Spark Streaming with Python and Kafka
South Africa - Spark Streaming with Python and Kafka
Brasil - Spark Streaming with Python and Kafka
Canada - Spark Streaming with Python and Kafka
中国 - Spark Streaming with Python and Kafka
香港 - Spark Streaming with Python and Kafka
澳門 - Spark Streaming with Python and Kafka
台灣 - Spark Streaming with Python and Kafka
USA - Spark Streaming with Python and Kafka
Österreich - Spark Streaming with Python and Kafka
Schweiz - Spark Streaming with Python and Kafka
Deutschland - Spark Streaming with Python and Kafka
Czech Republic - Spark Streaming with Python and Kafka
Denmark - Spark Streaming with Python and Kafka
Estonia - Spark Streaming with Python and Kafka
Finland - Spark Streaming with Python and Kafka
Greece - Spark Streaming with Python and Kafka
Magyarország - Spark Streaming with Python and Kafka
Ireland - Spark Streaming with Python and Kafka
Luxembourg - Spark Streaming with Python and Kafka
Latvia - Spark Streaming with Python and Kafka
España - Spark Streaming with Python and Kafka
Italia - Spark Streaming with Python and Kafka
Lithuania - Spark Streaming with Python and Kafka
Nederland - Spark Streaming with Python and Kafka
Norway - Spark Streaming with Python and Kafka
Portugal - Spark Streaming with Python and Kafka
România - Spark Streaming with Python and Kafka
Sverige - Spark Streaming with Python and Kafka
Türkiye - Spark Streaming with Python and Kafka
Malta - Spark Streaming with Python and Kafka
Belgique - Spark Streaming with Python and Kafka
France - Spark Streaming with Python and Kafka
日本 - Spark Streaming with Python and Kafka
Australia - Spark Streaming with Python and Kafka
Malaysia - Spark Streaming with Python and Kafka
New Zealand - Spark Streaming with Python and Kafka
Philippines - Spark Streaming with Python and Kafka
Singapore - Spark Streaming with Python and Kafka
Thailand - Spark Streaming with Python and Kafka
Vietnam - Spark Streaming with Python and Kafka
India - Spark Streaming with Python and Kafka
Argentina - Spark Streaming with Python and Kafka
Chile - Spark Streaming with Python and Kafka
Costa Rica - Spark Streaming with Python and Kafka
Ecuador - Spark Streaming with Python and Kafka
Guatemala - Spark Streaming with Python and Kafka
Colombia - Spark Streaming with Python and Kafka
México - Spark Streaming with Python and Kafka
Panama - Spark Streaming with Python and Kafka
Peru - Spark Streaming with Python and Kafka
Uruguay - Spark Streaming with Python and Kafka
Venezuela - Spark Streaming with Python and Kafka
Polska - Spark Streaming with Python and Kafka
United Kingdom - Spark Streaming with Python and Kafka
South Korea - Spark Streaming with Python and Kafka
Pakistan - Spark Streaming with Python and Kafka
Sri Lanka - Spark Streaming with Python and Kafka
Bulgaria - Spark Streaming with Python and Kafka
Bolivia - Spark Streaming with Python and Kafka
Indonesia - Spark Streaming with Python and Kafka
Kazakhstan - Spark Streaming with Python and Kafka
Moldova - Spark Streaming with Python and Kafka
Morocco - Spark Streaming with Python and Kafka
Tunisia - Spark Streaming with Python and Kafka
Kuwait - Spark Streaming with Python and Kafka
Oman - Spark Streaming with Python and Kafka
Slovakia - Spark Streaming with Python and Kafka
Kenya - Spark Streaming with Python and Kafka
Nigeria - Spark Streaming with Python and Kafka
Botswana - Spark Streaming with Python and Kafka
Slovenia - Spark Streaming with Python and Kafka
Croatia - Spark Streaming with Python and Kafka
Serbia - Spark Streaming with Python and Kafka
Bhutan - Spark Streaming with Python and Kafka