Lewati ke konten utama

Beranda Data Engineering

Kursus

Pengantar Apache Airflow dengan Python

LanjutanTingkat Keterampilan

Diperbarui 05/2026

Pelajari cara mengimplementasikan dan menjadwalkan alur kerja rekayasa data.

Mulai Kursus Gratis

AirflowData Engineering

4 jam

16 videos

57 Latihan

4,000 XP

62,478

Pernyataan Pencapaian

Dipercaya oleh para pelajar di ribuan perusahaan

Melatih Tim?

Coba untuk Bisnis

Deskripsi Kursus

Kini diperbarui ke Apache Airflow 3.1.6 - Menyajikan data sesuai jadwal sering kali merupakan proses manual. Anda menulis skrip, menambahkan tugas cron yang kompleks, dan mencoba berbagai cara untuk memenuhi persyaratan yang terus berubah—dan akan makin rumit saat harus mengelola semuanya bersama rekan kerja. Apache Airflow dapat menghilangkan kerumitan ini dengan menambahkan penjadwalan, penanganan galat, dan pelaporan ke alur kerja Anda. Dalam kursus ini, Anda akan menguasai dasar-dasar Apache Airflow dan mempelajari cara menerapkan pipeline rekayasa data yang kompleks di lingkungan produksi. Anda juga akan mempelajari cara menggunakan Directed Acyclic Graphs (Dag), mengotomatisasi alur kerja rekayasa data, serta menerapkan tugas-tugas rekayasa data dengan cara yang mudah dan dapat diulang—membantu Anda tetap terkendali.

Persyaratan

Intermediate Python Introduction to Shell

1

Pengantar Airflow

Di bab ini, Anda akan mendapatkan pengenalan lengkap tentang komponen Apache Airflow serta mempelajari cara dan alasan untuk menggunakannya.

Pengantar Apache Airflow

Penghitung Dag

Menjalankan Dag pertama Anda

Airflow Dags

Membuat Dag sederhana

Bekerja dengan Dag dan shell Airflow

Menganalisis perintah Airflow

Menguji sebuah task di Airflow

Antarmuka web Airflow

Menavigasi UI Airflow

Mengamati Dag dengan Airflow UI

Kesalahan Dag

2

Membangun Dag di Airflow

Apa kabar, Dag? Sekarang saatnya mempelajari dasar-dasar penerapan Dag Airflow. Melalui aktivitas praktis, Anda akan belajar cara menyiapkan dan menerapkan operator, tugas, dan penjadwalan.

Operator Airflow

Mendekorasi sebuah tugas

Mendefinisikan BashOperator dengan @task.bash

Menentukan Urutan Task

Lebih banyak @tasks

Menjadwalkan Dag

Menjadwalkan Dag melalui Python

Mengurai jadwal Airflow

Memecahkan masalah run Dag

Mengalirkan data antar tugas dengan XCom

Meneruskan data dengan XCom

Variabel XCom

Sensor Airflow

Menentukan urutan task

Membuat FileSensor

Deprivasi Sensorik

3

Memelihara dan memantau alur kerja Airflow

Di bab ini, Anda akan mempelajari cara menghemat waktu menggunakan komponen Airflow seperti sensor dan executor sambil memantau dan menyelesaikan masalah alur kerja Airflow.

Pemantauan, Peringatan, dan Callback

Mengimplementasikan fungsi callback

Menerapkan SmtpNotifier

Apa yang ada di log?

Templating dengan Jinja

Menulis dengan Jinja

Mengganti bagian

Variabel Airflow

Jawabannya adalah Variable

Membaca variabel di Python

Variabel kurang tepat

Debugging dan pemecahan masalah di Airflow

Pemecahan masalah Dag

4

Mengendalikan Logika Dag

Satukan semuanya. Di bab terakhir ini, Anda akan menerapkan semua yang telah dipelajari untuk membangun alur kerja berkualitas produksi di Airflow.

Pemicu dan Toleransi Kesalahan

Menerapkan Trigger Rule

Menambahkan retry

Memicu Dag anak

Mendefinisikan sebuah @task.branch

Pemecahan masalah percabangan

Operator HITL

Menambahkan persetujuan manusia

Tugas ApprovalOperator

Membuat pipeline produksi

Menyiapkan pipeline ETL penjualan

Menambahkan branching bulanan

Menambahkan gerbang persetujuan manusia

Pengantar Apache Airflow dengan Python

Kursus
Selesai

Memperoleh Surat Keterangan Prestasi

Tambahkan kredensial ini ke profil LinkedIn, resume, atau CV Anda
Bagikan di media sosial dan dalam penilaian kinerja AndaDaftar sekarang

Bergabung dengan 19 juta pelajar dan mulai Pengantar Apache Airflow dengan Python Hari Ini!

Kembangkan keterampilan data Anda dengan DataCamp untuk Mobile

Buat kemajuan di mana saja dengan kursus mobile kami dan tantangan coding harian 5 menit.