Azure Data Factory: Data Integration and Management

• 云计算概念的基本知识
• 熟悉数据集成和 ETL 流程

观众

• 数据工程师
• 数据分析师
• ETL 开发人员
• IT 专业人员

Azure 数据工厂 （ADF） 是由 Microsoft Azure 提供的基于云的数据整合服务。它使用户能够创建、编排和管理数据管道，以移动和转换来自各种来源的数据。

此讲师指导的即时培训（在线或现场）面向希望使用 Azure 数据工厂在云中实施可扩展且高效的数据集成解决方案的初级数据工程师。

在本次培训结束时，参与者将能够：

• 了解 Azure 数据工厂 （ADF） 的核心概念和体系结构。
• 了解如何创建、计划和监控数据管道。
• 与各种数据源集成，执行资料转换并管理数据流。
• 实施错误处理和性能优化的最佳实践。
• 保护和监控生产环境的数据管道。

课程形式

• 互动讲座和讨论。
• 大量的练习和练习。
• 在即时实验室环境中动手实施。

课程自定义选项

• 要申请本课程的定制培训，请联系我们进行安排。

Azure 数据工厂简介

• Azure 数据工厂概述
• 关键概念和架构
• ADF 的使用案例和优势

设置ADF环境

• 创建和配置ADF实例
• 导航 Azure 数据工厂门户
• 了解集成运行时

使用数据集和连结服务

• 定义数据集和连结服务
• 连接到不同的数据源
• 配置身份验证和安全连接

创建资料管道

• 管道基础知识和元件
• 使用 Activity 建立简单的资料管道
• 构建数据移动管道

数据流和转换 Activities

• 数据流简介
• 数据转换活动
• 设计和运行数据流转换

计划和触发管道

• 使用触发器计划管道运行
• 使用翻转视窗和基于事件的触发器
• 监控管道活动并了解输出日志

调试和错误处理

• 调试管道和数据流
• 实现错误处理和重试机制
• 向现有管道添加错误处理

性能优化

• 优化数据管道的最佳实践
• 了解和配置并行度和分区
• 优化管道性能

安全和监控

• 使用访问控制和许可权保护ADF
• 实施数据加密和安全数据传输
• 使用内置工具和警报监控数据管道

高级方案和集成

• 将ADF与其他 Azure 服务集成
• 处理复杂的数据集成场景
• 创建端到端数据整合解决方案

总结和后续步骤