面向数据工程师的 Azure 数据工厂 – Covid19项目

立即购买

价格: $34.99

欢迎!

我期待着帮助您学习云中一种按需使用的数据工程工具, Azure 数据工厂 (自动进稿器)! 本课程讲授使用 Azure 数据工厂实施数据工程解决方案 (自动进稿器) 用于报告 Covid-19 趋势和预测该病毒传播的现实世界问题.

这与 Udemy 中针对 Azure 数据工厂或数据工程技术的其他课程不同. 完成包括所有作业在内的课程后, 我坚信你将能够自己开始一个真实世界的数据工程项目，并且精通 Azure 数据工厂 (自动进稿器).

我还包括有关存储解决方案的课程，例如 Azure Data Lake Storage, Azure Blob 存储, Azure SQL 数据库等. 也, 有关于 Azure HDInsight 和 Azure Databricks 的课程. 我什至在 Azure 数据工厂数据管道处理的数据上包含使用 Power BI 构建报告的课程. 我认为机器学习模型超出了范围. 您可以使用这些数据来构建自己的模型并预测价差.

本课程遵循现实世界项目实施的逻辑进展，解释技术概念和 Azure 数据工厂中的数据管道 (自动进稿器) 同时建设. 即使本课程不是专门为教你通过 Azure 数据工程师助理认证考试 DP200 所需的技能而设计的 & DP203, 它可以极大地帮助您获得考试所需的大部分必要技能.

我和我一样珍惜你的时间. 所以, 我将这门课程设计得快节奏，切中要害. 也, 该课程以简单的英语授课，没有行话. 我从基础开始课程，到课程结束时，您将精通所使用的技术.

目前课程教你以下内容

Azure 数据工厂

• 使用 Azure 数据工程技术（例如 Azure 数据工厂）为数据工程解决方案构建解决方案体系结构 (自动进稿器), Azure Data Lake Gen2, Azure Blob 存储, Azure SQL数据库, Azure 数据块, Azure HDInsight 和 Microsoft PowerBI.

• 集成来自 HTTP 客户端的数据, 使用 Azure 数据工厂的 Azure Blob 存储和 Azure Data Lake Gen2.

• Azure 数据工厂中的分支和链接活动 (自动进稿器) 使用控制流活动（例如获取元数据）的管道. 如果条件, ForEach, 删除, 验证等.

• 在管道中使用参数和变量, 数据集和 LinkedServices 在 Azure 数据工厂中创建元数据驱动的管道 (自动进稿器)

• 调试数据管道并解决问题.

• 使用事件触发器等触发器调度管道, Azure 数据工厂中的计划触发器和翻转窗口触发器 (自动进稿器)

• 创建映射数据流以创建转换逻辑. 该课程涵盖了所有的转换步骤，例如 Source, 筛选, 选择, 枢, 抬头, 有条件拆分, 派生列, 总计的, 连接和接收器转换.

• 调试数据流, 调查问题, 修复故障等

• 实施 Azure 数据工厂管道以调用映射数据流并执行它们.

• 创建 ADF 管道以执行 HDInsight 活动并执行数据转换.

• 创建 ADF 管道以执行 Databricks Notebook 活动以执行转换.

• 在管道之间创建依赖关系以编排数据流

• 在触发器之间创建依赖关系以编排数据流

• 监控数据管道, 创建警报, 来自 Azure 数据工厂监视器的指标报告.

• 使用 Azure Monitor 监视数据工厂管道并设置要转发到 Azure 存储帐户或 Log Analytics 工作区的诊断设置.

• 创建 Log Analytics 工作区, 从 Azure 数据工厂管道上的日志分析创建工作簿和图表

• 实施 Azure 数据工厂分析监控工具以及如何进一步扩展功能.

Azure 存储解决方案

• 创建 Azure 存储帐户, 创建容器, 上传数据, 访问控制 (我是), 使用 Azure 存储资源管理器与存储帐户交互

• 创建 Azure Data Lake Gen2, 创建容器, 上传数据, 访问控制 (我是), 使用 Azure 存储资源管理器与存储帐户交互

• 创建 Azure SQL 数据库, 定价层, 创建管理员用户, 创建表, 加载数据和查询数据库.

Azure HDInsight & 数据块

• 创建 HDInsight 群集, 与 UI 交互, 使用 Ambari, 创建 Hive 表, 从 Azure 数据工厂调用 HDInsight 活动

• 创建 Azure Databricks 工作区, 创建 Databricks 集群, 挂载存储帐户, 创建 Databricks 笔记本, 使用 Databricks 笔记本执行转换, 从 Azure 数据工厂调用 Databricks 笔记本.