After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Descrizione del corso
La capacità di creare strumenti in grado di recuperare e analizzare informazioni distribuite sul web è stata e continua a essere preziosa in molti ambiti della data science. In questo corso imparerai a navigare e interpretare il codice HTML e a creare strumenti per esplorare automaticamente i siti web. Anche se lo scraping verrà effettuato con la versatile libreria Python scrapy, molte delle tecniche che imparerai possono essere applicate anche ad altre librerie Python popolari, come BeautifulSoup e Selenium. Al termine del corso avrai un solido modello mentale della struttura HTML, saprai creare strumenti per analizzare il codice HTML e accedere alle informazioni desiderate, e potrai creare semplici spider di scrapy per esplorare il web su larga scala.
Prerequisiti
Curriculum
Programma del corso
1
Introduzione a HTML
Impara la struttura di HTML. Iniziamo spiegando perché il web scraping può essere un’aggiunta preziosa alla tua cassetta degli attrezzi per la data science e poi approfondiamo alcune basi di HTML. Concludiamo il capitolo con una breve introduzione alla notazione XPath, usata per navigare tra gli elementi all’interno del codice HTML.
- Panoramica sul web scraping50 XP
- Il web scraping non è una sciocchezza!50 XP
- HyperText Markup Language50 XP
- Navigazione verbosa nell'albero HTML50 XP
- Dall'albero all'HTML100 XP
- Attributi50 XP
- Questione di classe100 XP
- Trovare href50 XP
- Mini corso su XPath50 XP
- Dove sono?100 XP
- È il momento di P100 XP
- Uno span con classe100 XP
2
XPath e Selettori
Sfrutta la sintassi XPath per esplorare i selettori di scrapy. Entrambi questi concetti ti porteranno verso la capacità di estrarre dati da un documento HTML.
3
Locator CSS, concatenazione e Responses
Impara la sintassi dei Locator CSS e inizia a sperimentare l’idea di concatenare Locator CSS con XPath. Introduciamo anche gli oggetti Response, che si comportano come i Selector ma offrono strumenti extra per ampliare le attività di scraping su più siti web.
4
Spider
Impara a creare crawler web con scrapy. Questi spider di scrapy esploreranno il web attraverso più pagine, seguendo i link per estrarre automaticamente ciascuna di esse secondo le procedure che abbiamo visto nei capitoli precedenti.
Web Scraping in Python
Corso
completato
