Azure Data Factory: Data Integration and Management

• 雲計算概念的基本知識
• 熟悉數據集成和 ETL 流程

觀眾

• 數據工程師
• 數據分析師
• ETL 開發人員
• IT 專業人員

Azure 數據工廠 （ADF） 是由 Microsoft Azure 提供的基於雲的數據整合服務。它使用戶能夠創建、編排和管理數據管道，以移動和轉換來自各種來源的數據。

此講師指導的即時培訓（在線或現場）面向希望使用 Azure 數據工廠在雲中實施可擴展且高效的數據集成解決方案的初級數據工程師。

在本次培訓結束時，參與者將能夠：

• 瞭解 Azure 數據工廠 （ADF） 的核心概念和體系結構。
• 瞭解如何創建、計劃和監控數據管道。
• 與各種數據源集成，執行資料轉換並管理數據流。
• 實施錯誤處理和性能優化的最佳實踐。
• 保護和監控生產環境的數據管道。

課程形式

• 互動講座和討論。
• 大量的練習和練習。
• 在即時實驗室環境中動手實施。

課程自定義選項

• 要申請本課程的定製培訓，請聯繫我們進行安排。

Azure 數據工廠簡介

• Azure 數據工廠概述
• 關鍵概念和架構
• ADF 的使用案例和優勢

設置ADF環境

• 創建和配置ADF實例
• 導航 Azure 數據工廠門戶
• 瞭解集成運行時

使用數據集和連結服務

• 定義數據集和連結服務
• 連接到不同的數據源
• 配置身份驗證和安全連接

創建資料管道

• 管道基礎知識和元件
• 使用 Activity 建立簡單的資料管道
• 構建數據移動管道

數據流和轉換 Activities

• 數據流簡介
• 數據轉換活動
• 設計和運行數據流轉換

計劃和觸發管道

• 使用觸發器計劃管道運行
• 使用翻轉視窗和基於事件的觸發器
• 監控管道活動並了解輸出日誌

調試和錯誤處理

• 調試管道和數據流
• 實現錯誤處理和重試機制
• 向現有管道添加錯誤處理

性能優化

• 優化數據管道的最佳實踐
• 瞭解和配置並行度和分區
• 優化管道性能

安全和監控

• 使用訪問控制和許可權保護ADF
• 實施數據加密和安全數據傳輸
• 使用內置工具和警報監控數據管道

高級方案和集成

• 將ADF與其他 Azure 服務集成
• 處理複雜的數據集成場景
• 創建端到端數據整合解決方案

總結和後續步驟