After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Descrierea cursului
Du-ți abilitățile Polars la nivel de producție. Învață să citești planurile de interogare și să valorifici la maximum optimizatorul, să lucrezi eficient cu surse Parquet, CSV și baze de date, și să exploatezi tipuri de date avansate precum List, Struct, Categorical și Enum. Vei transmite în flux interogări mari direct pe disc, vei procesa date în loturi și vei construi pipeline-uri testabile cu aserțiuni integrate. La final, vei fi pregătit să construiești fluxuri de date performante, capabile să gestioneze seturi de date de orice dimensiune.
Cerințe prealabile
Curriculum
Structura cursului
1
Optimizarea interogărilor în profunzime
Învață să păstrezi interogările în modul lazy pentru o optimizare maximă, să citești și să interpretezi planurile de interogare și să deblochezi căi rapide cu ajutorul profilării și al datelor sortate.
- Execuția eficientă a interogărilor50 XP
- Previzualizarea datelor în mod lazy100 XP
- Rezumarea împrumuturilor digitale100 XP
- Colectarea a două rapoarte simultan100 XP
- Optimizare și planuri de interogare50 XP
- Citirea planului naiv100 XP
- Citirea planului optimizat100 XP
- Ce face cu adevărat optimizarea interogărilor50 XP
- Folosirea optimizării la maximum50 XP
- Pivot lazy la format wide100 XP
- Profilarea unei interogări lazy100 XP
- Filtrare rapidă pe date sortate100 XP
2
Citirea și scrierea eficientă a datelor
Învață să citești și să scrii fișiere Parquet, să parsezi fișiere CSV complexe, să scanezi seturi de date din mai multe fișiere și partiții Hive și să interoghezi baze de date din Polars.
3
Tipuri de date avansate pentru o analiză optimă
Acest capitol acoperă lucrul cu coloane de tip List și Struct, codificarea șirurilor repetate ca tipuri de date Categorical și Enum, și reducerea consumului de memorie prin restrângerea tipurilor numerice.
4
Lucrul cu Polars la scară largă
Învață să folosești motoarele de streaming și GPU, să scrii rezultatele unor interogări mari direct pe disc cu partiționare și să testezi pipeline-uri cu aserțiunile integrate din Polars.
Scalarea și optimizarea pipeline-urilor de date cu Polars
Curs
finalizat
