Apache Iceberg Fundamentals

• Znajomość pojęć takich jak tabele, schematy, partycje i pozyskiwanie danych
• Podstawowa znajomość SQL

Odbiorcy

• Inżynierowie danych
• Architekci danych
• Analitycy danych
• Programiści

Apache Iceberg to otwarty format tabel dla dużych zbiorów danych, który zapewnia niezawodność i prostotę tabel SQL do dużych zbiorów danych. Został zaprojektowany w celu rozwiązania wyzwań związanych z zarządzaniem dużymi zbiorami danych w jeziorach danych, które często wymagają obsługi złożonych schematów, dużych plików i różnych źródeł danych.

To prowadzone przez instruktora szkolenie na żywo (na miejscu lub zdalnie) jest przeznaczone dla początkujących specjalistów od danych, którzy chcą zdobyć wiedzę i umiejętności niezbędne do efektywnego wykorzystania Apache Iceberg do zarządzania dużymi zbiorami danych, zapewnienia integralności danych i optymalizacji przepływów pracy przetwarzania danych.

Pod koniec tego szkolenia uczestnicy będą mogli

• Dokładnie zrozumieć architekturę, funkcje i zalety Apache Iceberg.
• Dowiedzieć się o formatach tabel, partycjonowaniu, ewolucji schematu i możliwościach podróży w czasie.
• Zainstalować i skonfigurować Apache Iceberg w różnych środowiskach.
• Tworzenie, zarządzanie i manipulowanie tabelami Iceberg.
• Zrozumieć proces migracji danych z innych formatów tabel do Iceberg.

Format kursu

• Interaktywny wykład i dyskusja.
• Wiele ćwiczeń i praktyki.
• Praktyczne wdrożenie w środowisku laboratoryjnym na żywo.

Opcje dostosowywania kursu

• Aby poprosić o spersonalizowane szkolenie dla tego kursu, skontaktuj się z nami.

Wprowadzenie do Apache Iceberg

• Przegląd Apache Iceberg
• Znaczenie i przypadki użycia w nowoczesnej architekturze danych
• Kluczowe funkcje i korzyści

Podstawowe koncepcje

• Format i architektura tabeli Iceberg
• Porównanie z innymi formatami tabel
• Partycjonowanie i ewolucja schematu
• Podróż w czasie i wersjonowanie danych

Konfiguracja Apache Iceberg

• Instalacja i konfiguracja
• Integracja Iceberg z różnymi silnikami przetwarzania danych
• Konfiguracja środowiska Iceberg na komputerze lokalnym

Podstawowe operacje

• Tworzenie i zarządzanie tabelami Iceberg
• Zapisywanie i odczytywanie danych z tabel Iceberg
• Podstawowe operacje CRUD

Migracja i integracja danych

• Migracja danych z Hive i innych systemów do Iceberg
• Integracja z narzędziami BI
• Migracja przykładowego zestawu danych do Iceberg

Optymalizacja wydajności

• Techniki dostrajania wydajności
• Optymalizacja zapytań i skanowania danych
• Optymalizacja wydajności w Iceberg

Przegląd funkcji zaawansowanych

• Ewolucja partycji i partycjonowanie ukryte
• Ewolucja tabel i zmiany schematu
• Funkcje podróży w czasie i wycofywania
• Wdrażanie zaawansowanych funkcji w Iceberg

Podsumowanie i kolejne kroki