After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Deskripsi Kursus
Dalam kursus ini, Anda akan mempelajari cara menggunakan Spark dari Python! Spark adalah alat untuk melakukan komputasi paralel dengan himpunan data berukuran besar dan terintegrasi dengan baik dengan Python. PySpark adalah paket Python yang mewujudkannya. Anda akan menggunakan paket ini untuk bekerja dengan data penerbangan dari Portland dan Seattle. Anda akan mempelajari cara mengolah data ini dan membangun keseluruhan pipeline Machine Learning untuk memprediksi apakah penerbangan akan tertunda atau tidak. Bersiaplah untuk menambahkan Spark ke kode Python Anda dan menyelami dunia Machine Learning berkinerja tinggi!
Prasyarat
Kurikulum
Garis besar kursus
1
Mengenal PySpark
Di bab ini, Anda akan mempelajari bagaimana Spark mengelola data serta bagaimana Anda dapat membaca dan menulis tabel dari Python.
- Sebenarnya, apa itu Spark?50 XP
- Menggunakan Spark di Python50 XP
- Mengenal SparkContext100 XP
- Menggunakan DataFrame50 XP
- Membuat SparkSession100 XP
- Melihat tabel100 XP
- Apakah Anda penasaran dengan kueri?100 XP
- Ubah DataFrame Spark menjadi pandas100 XP
- Tambahkan sedikit Spark pada data Anda100 XP
- Menghapus perantara100 XP
2
Memanipulasi data
Di bab ini, Anda akan mempelajari modul pyspark.sql, yang menyediakan kueri data teroptimasi untuk sesi Spark Anda.
3
Memulai dengan pipeline Machine Learning
PySpark memiliki rutin Machine Learning bawaan yang mutakhir, beserta utilitas untuk membuat pipeline Machine Learning lengkap. Anda akan mempelajarinya di bab ini.
4
Penyetelan dan pemilihan model
Di bab terakhir ini, Anda akan menerapkan yang telah dipelajari untuk membuat model yang memprediksi penerbangan mana yang akan tertunda.
Dasar-Dasar PySpark
Kursus
Selesai
