After doing these courses, I feel confident creating professional visualizations and dashboards
Mô tả khóa học
Đã cập nhật lên Apache Airflow 3.1.6 - Chuyển giao dữ liệu theo lịch có thể là một quy trình thủ công. Bạn viết script, thêm các tác vụ cron phức tạp, và thử nhiều cách để đáp ứng một bộ yêu cầu luôn thay đổi — và việc quản lý mọi thứ càng khó hơn khi làm việc theo nhóm. Apache Airflow có thể giải quyết vấn đề này bằng cách bổ sung tính năng lập lịch, xử lý lỗi và báo cáo cho quy trình làm việc của bạn. Trong khóa học này, bạn sẽ nắm vững các kiến thức cơ bản về Apache Airflow và học cách triển khai các pipeline kỹ thuật dữ liệu phức tạp trong môi trường production. Bạn cũng sẽ học cách sử dụng Directed Acyclic Graphs (Dag), tự động hóa quy trình kỹ thuật dữ liệu, và triển khai các tác vụ kỹ thuật dữ liệu theo cách dễ dàng và có thể lặp lại — giúp bạn giữ mọi thứ trong tầm kiểm soát.
Yêu cầu tiên quyết
Chương trình học
Đề cương khóa học
1
Giới thiệu về Airflow
Trong chương này, bạn sẽ được giới thiệu đầy đủ về các thành phần của Apache Airflow và học cách cũng như lý do bạn nên sử dụng chúng.
- Giới thiệu về Apache Airflow50 XP
- Bộ đếm Dag50 XP
- Chạy Dag đầu tiên của bạn50 XP
- Airflow DAGs50 XP
- Tạo một Dag đơn giản100 XP
- Làm việc với Dag và shell của Airflow50 XP
- Khám phá các lệnh Airflow50 XP
- Kiểm thử một task trong Airflow50 XP
- Giao diện web của Airflow50 XP
- Điều hướng trong Airflow UI50 XP
- Khám phá các Dag với Airflow UI50 XP
- Lỗi Dag50 XP
2
Xây dựng Dag trong Airflow
Xin chào Dag! Đến lúc học những điều cơ bản để triển khai Dag trong Airflow. Qua các hoạt động thực hành, bạn sẽ học cách thiết lập và triển khai operator, task và lập lịch.
3
Duy trì và giám sát quy trình Airflow
Trong chương này, bạn sẽ học cách tiết kiệm thời gian với các thành phần của Airflow như sensor và executor, đồng thời giám sát và xử lý sự cố các quy trình Airflow.
4
Kiểm soát logic của Dag
Gom mọi thứ lại với nhau. Trong chương cuối, bạn sẽ áp dụng mọi thứ đã học để xây dựng một quy trình làm việc chất lượng production trong Airflow.
Giới thiệu về Apache Airflow bằng Python
Hoàn
thành khóa học

