After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Cursusbeschrijving
Als je veel data scientists en data-analisten zou vragen welke taken het vaakst terugkomen in hun werkdag, dan staat data opschonen bijna altijd op het lijstje. Dat komt doordat echte data rommelig is. In deze cursus leer je hoe je data die is opgeslagen in een PostgreSQL-database kunt opschonen. Je leert veelvoorkomende problemen oplossen, zoals rommelige strings schoonmaken, omgaan met lege waarden, de overeenkomst tussen strings vergelijken, en nog veel meer. Je gaat hiermee praktisch aan de slag met interessante (maar rommelige) gegevenssets uit het Open Data-programma van New York City. Ben je klaar om die rommelige data strak te trekken?
Vereisten
Curriculum
Cursusoverzicht
1
Basis van data opschonen
In dit hoofdstuk krijg je inzicht in aanpakken voor het opschonen van data wanneer je met PostgreSQL-databases werkt, en leer je waarom het waardevol is om zo vroeg mogelijk in de pijplijn op te schonen. Je leert ook basisbewerkingen op strings, zoals onnodige spaties verwijderen, en meer gevorderde onderwerpen zoals patroonherkenning en stringgelijkenis om tekstwaarden te identificeren die opgeschoond moeten worden.
- Introductie tot data opschonen50 XP
- Een mindset voor dataschoonmaak ontwikkelen50 XP
- Functies toepassen voor het opschonen van strings100 XP
- Patroonherkenning50 XP
- Parkeerovertredingen indelen op tijdstip van de dag100 XP
- Identificerende informatie maskeren met reguliere expressies100 XP
- Overeenkomende, vergelijkbare strings50 XP
- Inconsistente kleurnamen matchen100 XP
- Kleurnamen standaardiseren100 XP
- Meerdere kleuren standaardiseren100 XP
- Tekst opmaken voor collega's100 XP
2
Ontbrekende, dubbele en ongeldige data
Je leert queries schrijven om veelvoorkomende problemen met ontbrekende, dubbele en ongeldige data op te lossen in de context van PostgreSQL-databasetabellen. In hands-on oefeningen gebruik je de functie COALESCE(), de SELECT-query en de WHERE-clausule om rommelige data op te schonen.
3
Data converteren
Soms moet je data in een PostgreSQL-database omzetten van het ene gegevenstype naar het andere. In dit hoofdstuk verken je de expressies die je nodig hebt om tekst naar numerieke types te converteren en hoe je strings opmaakt voor temporele data.
4
Data transformeren
In het laatste hoofdstuk leer je hoe je je data transformeert en draaitabellen maakt. Met echte postdata ontdek je hoe je adressen samenvoegt en splitst in plaats, staat en postcodes met krachtige functies zoals CONCAT(), SUBSTRING() en REGEXP_SPLIT_TO_TABLE().
S
Data opschonen in PostgreSQL-databases
Cursus
voltooid
