Na het volgen van deze cursussen voel ik me zeker genoeg om professionele visualisaties en dashboards te maken
Shoebur RahmanInkoopspecialist, Giz Bangladesh
Cursusbeschrijving
Klaar om met data op schaal te werken? In deze cursus leer je grote gegevenssets transformeren met Spark SQL en PySpark in Databricks. Je leert data vormgeven en opschonen, aggregaties uitvoeren met geoptimaliseerde joins en windowfuncties toepassen voor geavanceerde analyses. Ook zet je bestandsgebaseerde streaming op met fouttolerante checkpoints en sla je resultaten op als Delta-tabellen. Aan het einde orkestreer je meerstaps productie-pijplijnen met Databricks Workflows en Lakeflow Declarative Pipelines.
Vereisten
Lesprogramma
Cursusoverzicht
1
Data laden en vormgeven
In dit hoofdstuk leer je werken met Databricks-notebooks, CSV-data laden in Spark DataFrames en data vormgeven met PySpark en SQL.
2
Data opschonen en optimaliseren
Leer hoe je expliciete schema's definieert, een opschoningspijplijn bouwt en de queryprestaties optimaliseert met broadcast joins.
3
Analytics en productie-pijplijnen
Leer hoe je lopende totalen en rangordes berekent met windowfuncties, streamingpijplijnen bouwt en productie-workflows uitrolt.
Gegevens transformeren met Spark SQL in Databricks
Cursus
voltooid
