Machine Learning dengan PySpark

LanjutanTingkat Keterampilan

Diperbarui 11/2025

Deskripsi Kursus

Persyaratan

Supervised Learning with scikit-learn Introduction to PySpark

Pengantar

Spark adalah kerangka kerja untuk bekerja dengan Big Data. Pada bab ini Anda akan mempelajari latar belakang Spark dan Machine Learning. Anda kemudian akan mengetahui cara terhubung ke Spark menggunakan Python dan memuat data CSV.

Machine Learning & Spark

50 XP

Karakteristik Spark

50 XP

Komponen dalam Kluster Spark

50 XP

Menyambungkan ke Spark

50 XP

Lokasi Spark master

50 XP

Membuat SparkSession

100 XP

Memuat Data

50 XP

Memuat data penerbangan

100 XP

Memuat data spam SMS

100 XP

Mulai Bab

Klasifikasi

Sekarang setelah Anda memahami cara memasukkan data ke Spark, Anda akan beralih ke pembangunan dua jenis model klasifikasi: Decision Tree dan Logistic Regression. Anda juga akan mempelajari beberapa pendekatan untuk menyiapkan data.

Persiapan Data

50 XP

Menghapus kolom dan baris

100 XP

Manipulasi kolom

100 XP

Kolom kategorikal

100 XP

Menggabungkan kolom

100 XP

Pohon Keputusan

50 XP

Pembagian train/test

100 XP

Membangun Decision Tree

100 XP

Evaluasi Decision Tree

100 XP

Logistic Regression

50 XP

Membangun model Logistic Regression

100 XP

Evaluasi model Logistic Regression

100 XP

Mengubah Teks menjadi Tabel

50 XP

Tanda baca, angka, dan token

100 XP

Stopwords dan hashing

100 XP

Melatih pengklasifikasi spam

100 XP

Mulai Bab

Regresi

Selanjutnya Anda akan belajar membuat model Linear Regression. Anda juga akan mempelajari cara memperkaya data dengan merekayasa prediktor baru serta pendekatan andal untuk memilih hanya prediktor yang paling relevan.

One-Hot Encoding

50 XP

Menyandikan asal penerbangan

100 XP

Meng-encode ukuran kaus

50 XP

Regresi

50 XP

Model durasi penerbangan: Hanya jarak

100 XP

Menafsirkan koefisien

100 XP

Model durasi penerbangan: Menambahkan bandara asal

100 XP

Menafsirkan koefisien

100 XP

Bucketing & Rekayasa

50 XP

Pengelompokan waktu keberangkatan

100 XP

Model durasi penerbangan: Menambahkan waktu keberangkatan

100 XP

Regularisasi

50 XP

Model durasi penerbangan: Lebih banyak fitur!

100 XP

Model durasi penerbangan: Regularization!

100 XP

Mulai Bab

Ensemble & Pipeline

Terakhir, Anda akan belajar membuat model menjadi lebih efisien. Anda akan mengetahui cara menggunakan pipeline untuk membuat kode lebih jelas dan mudah dipelihara. Lalu Anda akan menggunakan cross-validation untuk menguji model dengan lebih baik dan memilih parameter model yang tepat. Terakhir Anda akan mencoba dua jenis model ensemble.

Pipeline

50 XP

Model durasi penerbangan: Tahap pipeline

100 XP

Model durasi penerbangan: Model pipeline

100 XP

Pipeline spam SMS

100 XP

Cross-Validation

50 XP

Melakukan cross-validation pada model durasi penerbangan sederhana

100 XP

Cross-validasi pipeline model durasi penerbangan

100 XP

Pencarian Grid

50 XP

Mengoptimalkan regresi linear pada flights

100 XP

Membedah model durasi penerbangan terbaik

100 XP

Optimasi spam SMS

100 XP

Berapa banyak model untuk grid search?

50 XP

Ensemble

50 XP

Penerbangan terlambat dengan Gradient-Boosted Trees

100 XP

Penerbangan tertunda dengan Random Forest

100 XP

Mengevaluasi Random Forest

100 XP

Pemikiran penutup

50 XP

Mulai Bab

Machine Learning dengan PySpark

Kursus
Selesai

Memperoleh Surat Keterangan Prestasi

Tambahkan kredensial ini ke profil LinkedIn, resume, atau CV Anda
Bagikan di media sosial dan dalam penilaian kinerja AndaDaftar sekarang

Machine Learning dengan PySpark

Melatih Tim?

Deskripsi Kursus

Persyaratan

Pengantar

Klasifikasi

Regresi

Ensemble & Pipeline

Memperoleh Surat Keterangan Prestasi

Bergabung dengan 19 juta pelajar dan mulai Machine Learning dengan PySpark Hari Ini!

Kembangkan keterampilan data Anda dengan DataCamp untuk Mobile

Deskripsi Kursus

Memperoleh Surat Keterangan Prestasi

Bergabung dengan .css-nklxlk{color:var(--wf-brand--main, #03EF62);}19 juta pelajar dan mulai Machine Learning dengan PySpark Hari Ini!

Buat Akun Gratis Anda

Kembangkan keterampilan data Anda dengan DataCamp untuk Mobile

Bergabung dengan 19 juta pelajar dan mulai Machine Learning dengan PySpark Hari Ini!