在线课程 – 使用 Google Cloud Institute Dataflow 进行无服务器数据处理的专业认证

构建可扩展和增长的大数据应用程序。满足您所有大数据需求的高级解决方案。

Suggested by: Coursera (What is Coursera?)

Start your Coursera.com free trial today
在线课程 - 使用 Google Cloud Institute Dataflow 进行无服务器数据处理的专业认证

Professional Certificate

中档

No prior knowledge required

Time to complete the course

7-day free trial

No unnecessary risks

Skills you will acquire in the course

  • 分析问题的能力
  • 沟通技巧
  • 团队 合作
  • 技术技能
  • 时间管理
  • 创造性思维
  • 冲突解决
  • 专业的
  • 组织和项目管理
  • 独立学习

What you will learn in the course

Courses for which the course is suitable

  • 数据开发人员
  • 数据工程师
  • 数据分析师
  • 数据项目经理
  • 大数据专家
  • 管道开发人员
  • 信息系统经理
  • Google Cloud 专家

专业化 – 一系列三个单元的课程

始终保持技术领先地位

这种情况正在日益形成，尤其是随着数据驱动型企业的需求不断增长。任何处理大数据的人都熟悉大数据的三个 V：数量、速度和多样性。如果有一种防生长技术旨在满足这些要求，会怎么样？

认识 Google Cloud Dataflow

Google Cloud Dataflow 通过统一 ATCH 中的处理和数据流处理来简化数据处理，并提供无服务器体验，使用户能够专注于分析，而不是基础架构。此专业化适用于希望加深对 Dataflow 的理解以推进其数据处理应用程序的客户和合作伙伴。

此专业有三门课程：

  • 基本：
    说明 Apache Beam 和 Dataflow 如何协同工作以满足您的数据处理需求，而不会冒着使用单一提供商的风险。
  • 管道开发：
    介绍如何将我们的业务逻辑转换为可在 Dataflow 上运行的数据处理应用程序。
  • 行动：
    概述了在 Dataflow 上管理数据应用程序的最重要经验，包括监控、问题排查、测试和可靠性。

实践学习项目

此专业化提供使用 Qwiklabs 平台的动手实验。这些实验建立在课程模块中学到的概念之上。如有需要，我们提供了实验室的 Java 和 Python 版本。对于需要添加/更新代码的实验室，我们提供了推荐的解决方案供您参考。

Details of the courses that make up the specialization

使用 Dataflow 进行无服务器数据处理：基础课程

课程 1 • 3 小时 • 4.2 （79 个评分）

课程详情

学习内容
  • 本课程是有关使用 Dataflow 进行无服务器数据处理的 3 门系列课程的第 1 部分。
  • 在第一门课程中，我们将首先简要说明 Apache Beam 是什么以及它与 Dataflow 的关系。
  • 接下来，我们将讨论 Apache Beam 的愿景以及 Beam Mobility Principle 的优势。
  • Beam Mobility Principle 允许开发人员使用他们喜欢的编程语言以及他们想要的执行平台。
  • 接下来，我们将介绍 Dataflow 如何让您在节省资金的同时将计算与存储分开。
  • 管理员、访问和检测工具如何与您的 Dataflow 流水线配合使用。
  • 最后，让我们看看如何为您的 Dataflow 用例实现正确的安全模型。

先决条件：

  • 有关使用 Dataflow 进行无服务器数据处理的课程系列以数据工程专项中讨论的术语为基础。
  • 我们推荐以下课程作为准备：
    • （i） 在 Google Cloud 中构建批处理数据管道：涵盖基本的数据流原则
    • （ii） 构建 Google Cloud 弹性流分析系统：涵盖基本的流概念，如窗口、触发器和水印

>>注册本课程即表示您同意常见问题解答和第 https://qwiklabs.com/terms_of_service 页中规定的 Qwiklabs 服务条款<<

使用 Dataflow 进行无服务器数据处理：管道开发

课程 2 • 31 小时 • 4.0 （40 个等级）

课程详情

学习内容
  • Google Cloud 数据工程课程中讨论的 Apache Beam 主要概念概述
  • DE 中讨论的关键流式处理概念概述（无限 PCollections、Windows、水印和触发器）
  • 选择您选择的输入/输出 （I/O） 并将其与 Dataflow 流水线匹配
  • 使用 Schema 简化 Beam 中的代码并提高管道性能

使用 Dataflow 进行无服务器数据处理：操作

课程 3 • 9 小时 • 3.6 （17 评分）

课程详情

学习内容
  • 在 Dataflow 管道上进行跟踪、故障排除、测试和 CI/CD。
  • 实施注重可靠性的 Dataflow 流水线，以最大限度地提高数据处理平台的稳定性。

相关产品