Build your ultimate AI agent
Descrierea cursului
Dacă ai întreba un număr mare de oameni de știință și analiști de date care sunt cele mai frecvente sarcini din ziua lor de lucru, curățarea datelor ar apărea în aproape toate răspunsurile. Motivul este simplu: datele din lumea reală sunt dezordonate. Pentru a te ajuta să le pui în ordine, acest curs te învață cum să cureți datele stocate într-o bază de date PostgreSQL. Vei învăța cum să rezolvi probleme frecvente, precum curățarea șirurilor de caractere dezordonate, gestionarea valorilor lipsă, compararea similarității dintre șiruri și multe altele. Vei exersa practic aceste operații folosind seturi de date interesante (dar dezordonate), puse la dispoziție de programul Open Data al orașului New York. Ești pregătit să aduci ordine în datele dezordonate?
Cerințe prealabile
Curriculum
Structura cursului
1
Noțiuni de bază despre curățarea datelor
În acest capitol, vei dobândi o înțelegere a abordărilor de curățare a datelor atunci când lucrezi cu baze de date PostgreSQL și vei descoperi valoarea curățării datelor cât mai devreme în flux. Vei învăța, de asemenea, tehnici de bază pentru editarea șirurilor de caractere, cum ar fi eliminarea spațiilor inutile, dar și subiecte mai avansate, precum potrivirea șabloanelor și similaritatea dintre șiruri, pentru a identifica valorile care necesită curățare.
- Introducere în curățarea datelor50 XP
- Dezvoltarea unei mentalități orientate spre curățarea datelor50 XP
- Aplicarea funcțiilor pentru curățarea șirurilor de caractere100 XP
- Potrivirea șabloanelor50 XP
- Clasificarea încălcărilor de parcare în funcție de ora din zi100 XP
- Mascarea informațiilor de identificare cu expresii regulate100 XP
- Potrivirea șirurilor similare50 XP
- Potrivirea numelor de culori inconsistente100 XP
- Standardizarea numelor de culori100 XP
- Standardizarea mai multor culori100 XP
- Formatarea textului pentru colegi100 XP
2
Date lipsă, duplicate și invalide
Vei învăța cum să scrii interogări pentru a rezolva probleme frecvente legate de datele lipsă, duplicate și invalide în contextul tabelelor dintr-o bază de date PostgreSQL. Prin exerciții practice, vei folosi funcția COALESCE(), interogarea SELECT și clauza WHERE pentru a curăța date dezordonate.
3
Conversia datelor
Uneori este necesar să convertești datele stocate într-o bază de date PostgreSQL dintr-un tip de date în altul. În acest capitol, vei explora expresiile necesare pentru a converti text în tipuri numerice și cum să formatezi șiruri de caractere pentru date temporale.
4
Transformarea datelor
În ultimul capitol, vei învăța cum să transformi datele și să construiești tabele pivot. Lucrând cu date poștale reale, vei descoperi cum să combini și să împarți adrese în oraș, stat și cod poștal, folosind o serie de funcții puternice, printre care CONCAT(), SUBSTRING() și REGEXP_SPLIT_TO_TABLE().
S
Curățarea datelor în baze de date PostgreSQL
Curs
finalizat
