ETL dan ELT di Python

MenengahTingkat Keterampilan

Diperbarui 01/2026

Pelajari cara membangun data pipeline yang efektif, memiliki performa tinggi, dan andal menggunakan prinsip Extract, Transform, dan Load.

Deskripsi Kursus

Persyaratan

Data Warehousing Concepts Streamlined Data Ingestion with pandas

Pengantar Pipa Data

Bersiaplah untuk mempelajari bagaimana data dikumpulkan, diproses, dan dipindahkan menggunakan pipa data. Anda akan menelusuri karakteristik pipa data terbaik, serta bersiap untuk merancang dan membangun pipa Anda sendiri.

Pengantar Pipeline ETL dan ELT

50 XP

Menjalankan Pipeline ETL

100 XP

ELT dalam Praktik

100 XP

Pipeline ETL dan ELT

50 XP

Membangun Pipeline ETL dan ELT

50 XP

Membangun Pipeline ETL

100 XP

Huruf "T" dalam ELT

100 XP

Mengekstrak, Mentransformasi, dan Memuat Data Nilai Siswa

100 XP

Mulai Bab

Membangun Pipa ETL

Pelajari cara memanfaatkan pandas untuk mengekstrak, mentransformasi, dan memuat data saat Anda membangun pipa data pertama Anda. Ketahui cara membuat logika ETL yang dapat digunakan kembali, serta menerapkan pencatatan (logging) dan penanganan pengecualian pada pipa Anda.

Mengekstrak data dari sumber terstruktur

50 XP

Mengekstrak data dari file parquet

100 XP

Mengambil data dari basis data SQL

100 XP

Membangun fungsi untuk mengekstrak data

100 XP

Transformasi data dengan pandas

50 XP

Menyaring DataFrame pandas

100 XP

Mentransformasikan data penjualan dengan pandas

100 XP

Memvalidasi transformasi data

100 XP

Menyimpan data dengan pandas

50 XP

Memuat data penjualan ke file CSV

100 XP

Menyesuaikan file CSV

100 XP

Menyimpan data ke berkas

100 XP

Memantau pipeline data

50 XP

Pencatatan log dalam sebuah pipeline data

100 XP

Menangani exception saat memuat data

100 XP

Pemantauan dan pemberitahuan dalam sebuah pipeline data

100 XP

Mulai Bab

Teknik ETL Lanjutan

Tingkatkan alur kerja Anda dengan teknik pemipaan data lanjutan, seperti bekerja dengan data non-tabel dan menyimpan DataFrame ke database SQL. Temukan perangkat untuk menangani transformasi tingkat lanjut dengan pandas, serta praktik terbaik untuk bekerja dengan data kompleks.

Mengekstrak data non-tabular

50 XP

Mengambil data JSON dengan pandas

100 XP

Membaca data JSON ke memori

100 XP

Transformasi data non-tabel

50 XP

Melakukan iterasi pada dictionary

100 XP

Mengurai data dari dictionary

100 XP

Mentransformasi data JSON

100 XP

Transformasi dan pembersihan DataFrame

100 XP

Transformasi data tingkat lanjut dengan pandas

50 XP

Mengisi nilai hilang dengan pandas

100 XP

Mengelompokkan data dengan pandas

100 XP

Menerapkan transformasi lanjutan pada DataFrame

100 XP

Memuat data ke basis data SQL dengan pandas

50 XP

Memuat data ke database Postgres

100 XP

Memvalidasi data yang dimuat ke Database Postgres

100 XP

Mulai Bab

Menerapkan dan Memelihara Pipa Data

Pada bab terakhir ini, Anda akan membuat kerangka kerja untuk memvalidasi dan menguji pipa data sebelum mengirimkannya ke produksi. Setelah menguji pipa Anda, Anda akan menelusuri teknik untuk menjalankan pipa data dari ujung ke ujung, sekaligus memungkinkan visibilitas terhadap kinerja pipa.

Menguji pipeline data secara manual

50 XP

Menguji data pipeline

50 XP

Memvalidasi pipeline data pada "checkpoint"

100 XP

Menguji pipeline data secara end-to-end

100 XP

Pengujian unit untuk sebuah pipeline data

50 XP

Memvalidasi data pipeline dengan assert

100 XP

Menulis unit test dengan pytest

100 XP

Membuat fixture dengan pytest

100 XP

Pengujian unit untuk data pipeline dengan fixtures

100 XP

Menjalankan pipeline data di produksi

50 XP

Alat orkestrasi dan ETL

50 XP

Pola arsitektur data pipeline

100 XP

Menjalankan pipeline data end-to-end

100 XP

Selamat!

50 XP

Mulai Bab

ETL dan ELT di Python

Kursus
Selesai

Memperoleh Surat Keterangan Prestasi

Tambahkan kredensial ini ke profil LinkedIn, resume, atau CV Anda
Bagikan di media sosial dan dalam penilaian kinerja AndaDaftar sekarang

ETL dan ELT di Python

Melatih Tim?

Deskripsi Kursus

Persyaratan

Pengantar Pipa Data

Membangun Pipa ETL

Teknik ETL Lanjutan

Menerapkan dan Memelihara Pipa Data

Memperoleh Surat Keterangan Prestasi

Bergabung dengan 19 juta pelajar dan mulai ETL dan ELT di Python Hari Ini!

Kembangkan keterampilan data Anda dengan DataCamp untuk Mobile

Deskripsi Kursus

Memperoleh Surat Keterangan Prestasi

Bergabung dengan .css-nklxlk{color:var(--wf-brand--main, #03EF62);}19 juta pelajar dan mulai ETL dan ELT di Python Hari Ini!

Buat Akun Gratis Anda

Kembangkan keterampilan data Anda dengan DataCamp untuk Mobile

Bergabung dengan 19 juta pelajar dan mulai ETL dan ELT di Python Hari Ini!