Azure Data Factory: Data Integration and Management

• Podstawowa znajomość koncepcji przetwarzania w chmurze
• Znajomość procesów integracji danych i ETL

Odbiorcy

• Inżynierowie danych
• Analitycy danych
• Programiści ETL
• Specjaliści IT

Azure Data Factory (ADF) to oparta na chmurze usługa integracji danych dostarczana przez Microsoft Azure. Umożliwia użytkownikom tworzenie, orkiestrację i zarządzanie potokami danych, które przenoszą i przekształcają dane z różnych źródeł.

To prowadzone przez instruktora szkolenie na żywo (na miejscu lub zdalnie) jest przeznaczone dla początkujących inżynierów danych, którzy chcą używać Azure Data Factory do wdrażania skalowalnych i wydajnych rozwiązań integracji danych w chmurze.

Pod koniec tego szkolenia uczestnicy będą mogli

• Zrozumieć podstawowe pojęcia i architekturę Azure Data Factory (ADF).
• Nauczyć się tworzyć, planować i monitorować potoki danych.
• Integracja z różnymi źródłami danych, wykonywanie transformacji danych i zarządzanie przepływami danych.
• Wdrażanie najlepszych praktyk w zakresie obsługi błędów i optymalizacji wydajności.
• Zabezpiecz i monitoruj potoki danych dla środowisk produkcyjnych.

Format kursu

• Interaktywny wykład i dyskusja.
• Wiele ćwiczeń i praktyki.
• Praktyczne wdrożenie w środowisku laboratoryjnym na żywo.

Opcje dostosowywania kursu

• Aby poprosić o spersonalizowane szkolenie dla tego kursu, skontaktuj się z nami w celu ustalenia szczegółów.

Wprowadzenie do Azure Data Factory

• Przegląd Azure Data Factory
• Kluczowe koncepcje i architektura
• Przypadki użycia i korzyści z ADF

Konfigurowanie środowiska ADF

• Tworzenie i konfigurowanie instancji ADF
• Poruszanie się po portalu Azure Data Factory
• Zrozumienie środowiska uruchomieniowego integracji

Praca z zestawami danych i połączonymi usługami

• Definiowanie zestawów danych i powiązanych usług
• Łączenie się z różnymi źródłami danych
• Konfigurowanie uwierzytelniania i bezpiecznych połączeń

Tworzenie potoków danych

• Podstawy i składniki potoków
• Tworzenie prostych potoków danych za pomocą działań
• Tworzenie potoku do przenoszenia danych

Przepływ i transformacja danych Activiti

• Wprowadzenie do przepływu danych
• Działania związane z transformacją danych
• Projektowanie i uruchamianie transformacji przepływu danych

Planowanie i wyzwalanie potoków

• Planowanie uruchamiania potoków za pomocą wyzwalaczy
• Korzystanie z okna przewijania i wyzwalaczy opartych na zdarzeniach
• Monitorowanie aktywności potoku i rozumienie dzienników wyjściowych

Debugowanie i obsługa błędów

• Debugowanie potoków i przepływów danych
• Wdrażanie mechanizmów obsługi błędów i ponawiania prób
• Dodawanie obsługi błędów do istniejących potoków

Optymalizacja wydajności

• Najlepsze praktyki optymalizacji potoków danych
• Zrozumienie i konfiguracja równoległości i partycjonowania
• Optymalizacja wydajności potoków

Bezpieczeństwo i monitorowanie

• Zabezpieczanie ADF za pomocą kontroli dostępu i uprawnień
• Wdrażanie szyfrowania danych i bezpiecznego przesyłania danych
• Monitorowanie potoków danych za pomocą wbudowanych narzędzi i alertów

Zaawansowane scenariusze i integracja

• Integracja ADF z innymi usługami Azure
• Obsługa złożonych scenariuszy integracji danych
• Tworzenie kompleksowego rozwiązania do integracji danych

Podsumowanie i kolejne kroki