Bu kursları tamamladıktan sonra profesyonel görselleştirmeler ve panolar oluşturma konusunda kendime güveniyorum
Shoebur RahmanSatın Alma Uzmanı, Giz Bangladesh
Kurs Açıklaması
Gerçek dünya verilerini ölçekli şekilde işlemeye hazır mısın? Bu kurs, Databricks üzerinde Spark SQL ve PySpark kullanarak büyük veri kümelerini dönüştürmeyi öğretiyor. Veriyi şekillendirmeyi ve temizlemeyi, optimize edilmiş birleştirmelerle toplulaştırmalar çalıştırmayı ve gelişmiş analizler için window fonksiyonlarını uygulamayı öğreneceksin. Ayrıca dosya tabanlı akışları hata toleranslı denetim noktalarıyla kuracak ve sonuçları Delta tabloları olarak kalıcı hale getireceksin. Kursun sonunda, Databricks Workflows ve Lakeflow Declarative Pipelines ile çok adımlı üretim boru hatlarını orkestre edebileceksin.
Ön Koşullar
Müfredat
Kurs planı
1
Veri Yükleme ve Şekillendirme
Bu bölümde Databricks not defterleriyle çalışmayı, CSV verisini Spark DataFrame'lerine yüklemeyi ve veriyi PySpark ile SQL kullanarak şekillendirmeyi öğreneceksin.
- Databricks not defterleriyle çalışmak50 XP
- Databricks notebook'larını anlama50 XP
- İlk veri kümeni yükleme100 XP
- Sürücü günlüklerini keşfetme100 XP
- PySpark ve SQL ile verileri şekillendirme50 XP
- Veriyi şekillendirmek için PySpark kullanma100 XP
- SQL ile verileri analiz etme100 XP
- Geçici görünümleri anlama50 XP
2
Veri Temizleme ve Optimizasyon
Açık şemalar tanımlamayı, bir veri temizleme boru hattı kurmayı ve broadcast join'lerle sorgu performansını optimize etmeyi öğren.
3
Analitik ve Üretim Boru Hatları
Window fonksiyonlarıyla kümülatif toplamlar ve sıralamalar hesaplamayı, akış boru hatları kurmayı ve üretim iş akışlarını devreye almayı öğren.
Databricks'te Spark SQL ile Veri Dönüştürme
Kurs
Tamamlandı
