After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Cursusbeschrijving
We leven in een drukke wereld met strakke deadlines. Daardoor vallen we vaak terug op wat bekend en makkelijk is, zoals GUI's als Visual Studio en RStudio. Toch is tijd investeren in data-analyse via de command line op lange termijn heel waardevol: je wordt er sterker en productiever van als data professional.In deze cursus pakken we het praktisch aan en leer je eenvoudige, krachtige en dataspecifieke command line-vaardigheden. Met openbaar beschikbare Spotify-gegevenssets leer je data downloaden, verwerken, opschonen en transformeren, allemaal via de command line. Ook behandelen we geavanceerde technieken zoals SQL-databasebewerkingen via de command line. Tot slot combineren we de kracht van de command line en Python om een datapijplijn te bouwen voor het automatiseren van een voorspellend model.
Vereisten
Curriculum
Cursusoverzicht
1
Data downloaden via de command line
In dit hoofdstuk leer je hoe je databestanden van webservers kunt downloaden via de command line. Onderweg maak je ook kennis met handleidingen, optievlaggen en het verwerken van meerdere bestanden.
- Data downloaden met curl50 XP
- De curl-documentatie gebruiken50 XP
- Een enkel bestand downloaden met curl100 XP
- Meerdere bestanden downloaden met curl100 XP
- Gegevens downloaden met Wget50 XP
- Wget installeren50 XP
- Eén bestand downloaden met wget100 XP
- Geavanceerd downloaden met Wget50 XP
- Beperkingen instellen voor meerdere bestandsdownloads50 XP
- Wachttijd instellen met Wget100 XP
- Data downloaden met Wget en curl100 XP
2
Data opschonen en prepareren via de command line
We gaan verder van data downloaden naar dataverwerking. In dit hoofdstuk gebruiken we de command line-bibliotheek csvkit om bestanden te converteren, te bekijken, te filteren en te bewerken zodat onze data klaar is voor verdere analyses.
3
Databasebewerkingen via de command line
In dit hoofdstuk duiken we dieper in alles wat de csvkit-bibliotheek te bieden heeft. We focussen met name op databasebewerkingen die we op de command line kunnen doen, zoals het aanmaken van tabellen, data ophalen en diverse ETL-transformaties.
4
Datapijplijn via de command line
In het laatste hoofdstuk slaan we de brug tussen de command line en andere data science-talen en leer je hoe ze kunnen samenwerken. Met Python als casus leer je Python uitvoeren op de command line, afhankelijkheden installeren met de pakketbeheerder pip, en een volledige modelpijplijn bouwen via de command line.
S
Gegevens verwerken in de Shell
Cursus
voltooid
