ข้ามไปยังเนื้อหาหลัก

บ้าน Google Cloud

Courses

Introduction to Data Engineering on Google Cloud

พื้นฐานระดับทักษะ

อัปเดตแล้ว 05/2569

Learn the data engineering role on Google Cloud. Explore data sources, storage solutions, ETL/ELT architectures, BigQuery, Dataform, and Dataproc.

เริ่มเรียนหลักสูตรฟรี

Google CloudCloud

3 41

42 videos

80 Exercises

4,350 เอ็กซ์พี

คำแถลงแสดงความสำเร็จ

สร้างบัญชีฟรีของคุณ

ดำเนินการต่อด้วย Google แสดงตัวเลือกเพิ่มเติม

หรือ

เมื่อดำเนินการต่อ คุณยอมรับข้อกำหนดการใช้งานของเรา นโยบายความเป็นส่วนตัวของเรา และยอมรับว่าข้อมูลของคุณจะถูกจัดเก็บไว้ในสหรัฐอเมริกา

เป็นที่ชื่นชอบของผู้เรียนในบริษัทหลายพันแห่ง

Training a Team?

Try for Business

คำอธิบายรายวิชา

This course introduces the data engineering role on Google Cloud. You'll learn about data sources, sinks, formats, and storage solutions, then explore replication, migration, and ETL/ELT architectures using BigQuery, Dataform, Dataproc, and Cloud Composer. The course includes hands-on labs with Datastream, BigLake, and Serverless Spark.

ข้อกำหนดเบื้องต้น

หลักสูตรนี้ไม่มีข้อกำหนดเบื้องต้นใดๆ

1

Course Introduction

This section welcomes you to the Introduction to Data Engineering on Google Cloud course, and provides an overview of the course structure and goals.

Course Introduction

50 เอ็กซ์พี

เริ่มบท

2

Data Engineering Tasks and Components

This module provides an introduction to the role of a data engineer. It covers key concepts such as data sources and sinks, data formats, storage options on Google Cloud, metadata management, and the use of Analytics Hub for data sharing within and outside an organization.

Module Introduction

50 เอ็กซ์พี

The Role of a Data Engineer

50 เอ็กซ์พี

Data Sources Versus Data Sinks

50 เอ็กซ์พี

Data Formats

50 เอ็กซ์พี

Storage Solution Options on Google Cloud

50 เอ็กซ์พี

Metadata Management Options on Google Cloud

50 เอ็กซ์พี

Sharing Datasets using Analytics Hub

50 เอ็กซ์พี

Lab Intro: Loading Data into BigQuery

50 เอ็กซ์พี

Loading Data into BigQuery

100 เอ็กซ์พี

Quiz Question 1

50 เอ็กซ์พี

Quiz Question 2

50 เอ็กซ์พี

Quiz Question 3

50 เอ็กซ์พี

Quiz Question 4

50 เอ็กซ์พี

Quiz Question 5

50 เอ็กซ์พี

เริ่มบท

3

Data Replication and Migration

This module provides an overview of data replication and migration on Google Cloud. It covers the basic architecture, the 'gcloud' command-line tool, Storage Transfer Service, Transfer Appliance, and Datastream, along with their functionalities and use cases.

Module Introduction

50 เอ็กซ์พี

Replication and Migration Architecture

50 เอ็กซ์พี

The gcloud Command Line Tool

50 เอ็กซ์พี

Moving Datasets

50 เอ็กซ์พี

50 เอ็กซ์พี

Lab Intro: Datastream: PostgreSQL Replication to BigQuery

50 เอ็กซ์พี

Datastream: PostgreSQL Replication to BigQuery

100 เอ็กซ์พี

Quiz Question 1

50 เอ็กซ์พี

Quiz Question 2

50 เอ็กซ์พี

Quiz Question 3

50 เอ็กซ์พี

Quiz Question 4

50 เอ็กซ์พี

Quiz Question 5

50 เอ็กซ์พี

เริ่มบท

4

The Extract and Load Data Pipeline Pattern

This module focuses on data extraction and loading processes on Google Cloud, particularly with BigQuery. It covers the basic extraction and loading architecture, the bq command-line tool, BigQuery Data Transfer Service, and BigLake as an alternative to traditional extract-load patterns.

Module Introduction

50 เอ็กซ์พี

Extract and Load Architecture

50 เอ็กซ์พี

The bq Command Line Tool

50 เอ็กซ์พี

BigQuery Data Transfer Service

50 เอ็กซ์พี

50 เอ็กซ์พี

Lab Intro: BigLake: Qwik Start

50 เอ็กซ์พี

BigLake: Qwik Start

100 เอ็กซ์พี

Quiz Question 1

50 เอ็กซ์พี

Quiz Question 2

50 เอ็กซ์พี

Quiz Question 3

50 เอ็กซ์พี

Quiz Question 4

50 เอ็กซ์พี

Quiz Question 5

50 เอ็กซ์พี

เริ่มบท

5

The Extract, Load, and Transform Data Pipeline Pattern

This module provides an overview of ELT (extract, load, transform) processes on Google Cloud. It covers the basic ELT architecture, a common ELT pipeline example, BigQuery's capabilities for scripting and scheduling SQL, and the functionality and use cases of Dataform.

Module Introduction

50 เอ็กซ์พี

Extract, Load, and Transform (ELT) Architecture

50 เอ็กซ์พี

SQL Scripting and Scheduling with BigQuery

50 เอ็กซ์พี

50 เอ็กซ์พี

Lab Intro: Create and Execute a SQL Workflow in Dataform

50 เอ็กซ์พี

Create and execute a SQL workflow in Dataform

100 เอ็กซ์พี

Quiz Question 1

50 เอ็กซ์พี

Quiz Question 2

50 เอ็กซ์พี

Quiz Question 3

50 เอ็กซ์พี

Quiz Question 4

50 เอ็กซ์พี

Quiz Question 5

50 เอ็กซ์พี

เริ่มบท

6

The Extract, Transform, and Load Data Pipeline Pattern

This module provides an overview of ETL (extract, transform, load) processes on Google Cloud. It covers the basic ETL architecture, GUI tools, batch and streaming data processing options (Dataproc, Dataproc Serverless), and the role of Bigtable in data pipelines.

Module Introduction

50 เอ็กซ์พี

Extract, Transform, and Load (ETL) Architecture

50 เอ็กซ์พี

Google Cloud GUI Tools for ETL Data Pipelines

50 เอ็กซ์พี

Batch Data Processing Using Dataproc

50 เอ็กซ์พี

Lab Intro: Use Serverless for Apache Spark to Load BigQuery

50 เอ็กซ์พี

Use Serverless for Apache Spark to Load BigQuery

100 เอ็กซ์พี

Streaming Data Processing Options

50 เอ็กซ์พี

Bigtable and Data Pipelines

50 เอ็กซ์พี

Lab Intro: Creating a Streaming Data Pipeline for a Real-Time Dashboard with Dataflow

50 เอ็กซ์พี

Creating a Streaming Data Pipeline for a Real-Time Dashboard with Dataflow

100 เอ็กซ์พี

Quiz Question 1

50 เอ็กซ์พี

Quiz Question 2

50 เอ็กซ์พี

Quiz Question 3

50 เอ็กซ์พี

Quiz Question 4

50 เอ็กซ์พี

Quiz Question 5

50 เอ็กซ์พี

เริ่มบท

7

Automation Techniques

This module focuses on automation patterns and options for pipelines on Google Cloud. It covers various tools and services like Cloud Scheduler, Workflows, Cloud Composer, Cloud Run functions, and Eventarc, along with their functionalities and use cases for automation.

Module Introduction

50 เอ็กซ์พี

Automation Patterns and Options for Pipelines

50 เอ็กซ์พี

Cloud Scheduler and Workflows

50 เอ็กซ์พี

Cloud Composer

50 เอ็กซ์พี

Cloud Run Functions

50 เอ็กซ์พี

50 เอ็กซ์พี

Lab Intro: Use Cloud Run Functions to Load BigQuery

50 เอ็กซ์พี

Use Cloud Run Functions to Load BigQuery

100 เอ็กซ์พี

Quiz Question 1

50 เอ็กซ์พี

Quiz Question 2

50 เอ็กซ์พี

Quiz Question 3

50 เอ็กซ์พี

Quiz Question 4

50 เอ็กซ์พี

Quiz Question 5

50 เอ็กซ์พี

เริ่มบท

8

Course Summary

In this final section, we review what was presented in this course and discuss the next steps to continue your cloud learning journey.

Course Summary

50 เอ็กซ์พี

Course Resources

50 เอ็กซ์พี

เริ่มบท

Introduction to Data Engineering on Google Cloud

หลักสูตรเสร็จสมบูรณ์

ได้รับใบรับรองความสำเร็จ

เพิ่มข้อมูลรับรองนี้ลงในโปรไฟล์ LinkedIn, ประวัติย่อ หรือเรซูเม่ของคุณ
แชร์ลงในโซเชียลมีเดียและในรายงานประเมินผลการปฏิบัติงานของคุณลงทะเบียนเลย

เข้าร่วมกับ... 19 ล้านผู้เรียน และเริ่ม Introduction to Data Engineering on Google Cloud วันนี้เลย!

สร้างบัญชีฟรีของคุณ

ดำเนินการต่อด้วย Google แสดงตัวเลือกเพิ่มเติม

หรือ

เมื่อดำเนินการต่อ คุณยอมรับข้อกำหนดการใช้งานของเรา นโยบายความเป็นส่วนตัวของเรา และยอมรับว่าข้อมูลของคุณจะถูกจัดเก็บไว้ในสหรัฐอเมริกา

พัฒนาทักษะด้านข้อมูลของคุณด้วย DataCamp for Mobile

พัฒนาทักษะได้ทุกที่ทุกเวลาด้วยคอร์สเรียนบนมือถือและแบบฝึกหัดเขียนโค้ดประจำวัน 5 นาทีของเรา