After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Deskripsi Kursus
Apa yang menggerakkan sistem yang kita gunakan setiap hari tanpa kita sadari, seperti deteksi penipuan untuk menjaga keamanan transaksi atau lampu lalu lintas yang membuat arus kendaraan tetap lancar? Jawabannya adalah data streaming (data yang dihasilkan terus-menerus dari berbagai sumber) dan teknologi tanpa server—seperti Amazon Kinesis dan AWS Lambda.
Dalam kursus ini, Anda akan mempelajari cara memanfaatkan teknologi kuat tersebut dengan membantu seorang data engineer fiksi bernama Cody. Tujuan Anda adalah membantunya mengumpulkan data streaming waktu nyata dari kendaraan milik kota, menganalisis data tersebut, dan mengirim peringatan yang relevan seperti peringatan kecepatan kepada pengemudi. Dengan Amazon Kinesis dan Firehose, Anda akan belajar cara mengumpulkan data dari jutaan sumber sebelum menggunakan Kinesis Analytics untuk menganalisis data saat data mengalir dalam stream. Anda juga akan membuat fungsi tanpa server di AWS Lambda yang akan memicu tindakan secara kondisional berdasarkan data yang diterima. Pada akhir pelatihan ini Anda akan mengetahui cara membuat dasbor ElasticSearch langsung dengan AWS QuickSight dan CloudWatch—dan semoga membantu Cody menyelesaikan proyek ambisiusnya.
Dalam kursus ini, Anda akan mempelajari cara memanfaatkan teknologi kuat tersebut dengan membantu seorang data engineer fiksi bernama Cody. Tujuan Anda adalah membantunya mengumpulkan data streaming waktu nyata dari kendaraan milik kota, menganalisis data tersebut, dan mengirim peringatan yang relevan seperti peringatan kecepatan kepada pengemudi. Dengan Amazon Kinesis dan Firehose, Anda akan belajar cara mengumpulkan data dari jutaan sumber sebelum menggunakan Kinesis Analytics untuk menganalisis data saat data mengalir dalam stream. Anda juga akan membuat fungsi tanpa server di AWS Lambda yang akan memicu tindakan secara kondisional berdasarkan data yang diterima. Pada akhir pelatihan ini Anda akan mengetahui cara membuat dasbor ElasticSearch langsung dengan AWS QuickSight dan CloudWatch—dan semoga membantu Cody menyelesaikan proyek ambisiusnya.
Prasyarat
Kurikulum
Garis besar kursus
1
Streaming di cloud
Pada bab pertama ini, Anda akan mempelajari perbedaan antara pemrosesan batch dan stream, membuat stream pertama Anda, mengelola izinnya, menulis ke stream, dan membacanya.
- Apa itu streaming dan mengapa hal itu penting?50 XP
- Batch vs stream100 XP
- Produser dan destination100 XP
- Mengelola Firehose delivery stream100 XP
- Bersiap untuk stream pertama50 XP
- Membuat role50 XP
- Perbandingan IAM users vs. roles100 XP
- Latihan izin akses100 XP
- Pembuatan bucket S3100 XP
- Bekerja dengan delivery stream Firehose50 XP
- Buat Firehose stream pertama Anda100 XP
- Menulis ke stream Firehose100 XP
- Membaca data Firehose100 XP
2
Menuju tanpa server
Langkah berikutnya dalam perjalanan data streaming Anda adalah mempelajari cara menggunakan fungsi lambda transformasional untuk beralih ke arsitektur tanpa server. Melalui latihan praktik, Anda akan menambahkan lapisan lambda dan memicu fungsi lambda berdasarkan kondisi tertentu.
3
Menganalisis data streaming
Sekarang Anda siap untuk melakukan encoding dan decoding data streaming serta menganalisis data langsung di dalam stream. Anda bahkan akan menggunakan beberapa stream untuk mendapatkan kecepatan puncak harian kendaraan.
4
Memantau dan memvisualisasikan data streaming
Di bab terakhir ini, Anda akan mempelajari cara memantau kinerja stream menggunakan log, metrik, alarm, dan dasbor. Anda akan menggunakan Elasticsearch dan membangun dasbor Kibana Anda sendiri.
Streaming Data dengan AWS Kinesis dan Lambda
Kursus
Selesai
