After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Deskripsi Kursus
Kemampuan untuk membangun alat yang dapat mengambil dan mengurai informasi yang tersimpan di seluruh internet telah dan akan terus bernilai dalam berbagai aspek data science. Dalam kursus ini, Anda akan mempelajari cara menavigasi dan mengurai kode HTML, serta membangun alat untuk merayapi situs web secara otomatis. Meskipun proses scraping kita dilakukan menggunakan pustaka Python yang serbaguna, yaitu scrapy, banyak teknik yang Anda pelajari di kursus ini juga dapat diterapkan pada pustaka Python populer lainnya, termasuk BeautifulSoup dan Selenium. Setelah menyelesaikan kursus ini, Anda akan memiliki pemahaman yang kuat tentang struktur HTML, mampu membangun alat untuk mengurai kode HTML dan mengakses informasi yang diinginkan, serta membuat spider scrapy sederhana untuk merayapi web dalam skala besar.
Prasyarat
Kurikulum
Garis besar kursus
1
Pengantar HTML
Pelajari struktur HTML. Kita mulai dengan menjelaskan mengapa web scraping dapat menjadi tambahan yang berharga dalam perangkat data science Anda lalu membahas dasar-dasar HTML. Kita akhiri bab ini dengan pengantar singkat tentang notasi XPath, yang digunakan untuk menavigasi elemen dalam kode HTML.
- Tinjauan Umum Web Scraping50 XP
- Web-scraping bukan omong kosong!50 XP
- HyperText Markup Language50 XP
- Navigasi pohon HTML secara verbal50 XP
- Dari Pohon ke HTML100 XP
- Atribut50 XP
- Tetap Elegan100 XP
- Menemukan href50 XP
- Kilasan Cepat tentang XPath50 XP
- Di mana saya?100 XP
- Saatnya ke P100 XP
- Sebuah span yang berkelas100 XP
2
XPath dan Selector
Manfaatkan sintaks XPath untuk mengeksplorasi selector scrapy. Kedua konsep ini akan mengarahkan Anda untuk dapat melakukan scraping pada dokumen HTML.
3
CSS Locator, Chaining, dan Response
Pelajari sintaks CSS Locator dan mulai bereksperimen dengan menggabungkan CSS Locator dengan XPath. Kami juga memperkenalkan objek Response, yang berperilaku seperti Selector namun memberi kita alat tambahan untuk menggerakkan upaya scraping di berbagai situs web.
4
Spider
Pelajari cara membuat perayap web dengan scrapy. Spider scrapy ini akan merayapi web melalui beberapa halaman, mengikuti tautan untuk melakukan scraping pada setiap halaman tersebut secara otomatis sesuai prosedur yang telah kita pelajari di bab sebelumnya.
Web Scraping dengan Python
Kursus
Selesai
