Apache Iceberg Fundamentals

• 熟悉表、架構、分區和數據引入等概念
• 基礎知識 SQL

觀眾

• 數據工程師
• 數據架構師
• 數據分析師
• 軟體開發人員

Apache Iceberg 是一種用於大規模數據集的開源表格式，它將 SQL 表的可靠性和簡單性引入大數據。它旨在解決在數據湖中管理大數據的挑戰，這些挑戰通常涉及處理複雜的架構、大檔和不同的數據源。

這種以講師為主導的現場培訓（在線或現場）面向希望獲得有效利用 Apache Iceberg 管理大規模數據集、確保數據完整性和優化數據處理工作流程所需的知識和技能的初級數據專業人員。

在培訓結束時，參與者將能夠：

• 全面瞭解 Apache Iceberg 的架構、功能和優勢。
• 瞭解表格式、分區、架構演變和時間旅行功能。
• 在不同的環境中安裝和配置 Apache Iceberg。
• 創建、管理和操作 Iceberg 表。
• 瞭解將數據從其他表格式遷移到 Iceberg 的過程。

課程形式

• 互動講座和討論。
• 大量的練習和練習。
• 在現場實驗室環境中動手實施。

課程自定義選項

• 如需申請本課程的定製培訓，請聯繫我們進行安排。

Apache Iceberg 簡介

• Apache Iceberg 概述
• 現代數據架構中的重要性和用例
• 主要特性和優勢

核心概念

• 冰山表格式和體系結構
• 與其他表格格式的比較
• 分區和架構演變
• 時間旅行和數據版本控制

設置 Apache Iceberg

• 安裝和配置
• 將 Iceberg 與各種數據處理引擎集成
• 在本地電腦上設置 Iceberg 環境

基本操作

• 創建和管理 Iceberg 表
• 寫入和讀取 Iceberg 表
• 基本 CRUD 操作

數據遷移和集成

• 將數據從 Hive 和其他系統遷移到 Iceberg
• 與 BI 工具整合
• 將示例數據集遷移到 Iceberg

優化性能

• 性能調優技術
• 優化查詢和數據掃描
• Iceberg 中的性能優化

高級功能概述

• 分區演進和隱藏分區
• 表演變和架構更改
• 時間旅行和回滾功能
• 在 Iceberg 中實現高級功能

摘要和後續步驟