After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Kurs Açıklaması
Günlük hayatta fark etmeden kullandığımız sistemleri — örneğin işlemlerimizi güvende tutan dolandırıcılık tespiti ya da trafiğin akışını düzenleyen trafik ışıkları — hangi teknoloji çalıştırıyor? Cevap: akış verileri (farklı kaynaklar tarafından sürekli üretilen veriler) ve Amazon Kinesis ile AWS Lambda gibi sunucusuz teknolojiler.
Bu derste, bu güçlü teknolojilerden nasıl yararlanacağını, kurgusal bir veri mühendisi olan Cody’e yardım ederek öğreneceksin. Amacın, şehir araçlarından gerçek zamanlı akış verisi toplamasına, bu veriyi analiz etmesine ve sürücülere hız uyarıları gibi ilgili bildirimler göndermesine yardımcı olmak. Amazon Kinesis ve Firehose kullanarak milyonlarca kaynaktan veri almayı; ardından veri akış içindeyken Kinesis Analytics ile analiz etmeyi öğreneceksin. AWS Lambda’da, gelen veriye göre koşullu olarak eylem tetikleyen sunucusuz fonksiyonlar da çalıştıracaksın. Eğitimin sonunda AWS QuickSight ve CloudWatch ile canlı ElasticSearch panoları oluşturmayı bilecek — ve umarız Cody’nin iddialı projesini tamamlamasına yardım etmiş olacaksın.
Bu derste, bu güçlü teknolojilerden nasıl yararlanacağını, kurgusal bir veri mühendisi olan Cody’e yardım ederek öğreneceksin. Amacın, şehir araçlarından gerçek zamanlı akış verisi toplamasına, bu veriyi analiz etmesine ve sürücülere hız uyarıları gibi ilgili bildirimler göndermesine yardımcı olmak. Amazon Kinesis ve Firehose kullanarak milyonlarca kaynaktan veri almayı; ardından veri akış içindeyken Kinesis Analytics ile analiz etmeyi öğreneceksin. AWS Lambda’da, gelen veriye göre koşullu olarak eylem tetikleyen sunucusuz fonksiyonlar da çalıştıracaksın. Eğitimin sonunda AWS QuickSight ve CloudWatch ile canlı ElasticSearch panoları oluşturmayı bilecek — ve umarız Cody’nin iddialı projesini tamamlamasına yardım etmiş olacaksın.
Ön Koşullar
Müfredat
Kurs içeriği
1
Bulutta akış
Bu ilk bölümde, yığın (batch) ve akış (stream) işlemeyi birbirinden ayırt etmeyi öğrenecek, ilk akışını oluşturacak, izinlerini yönetecek, akışa yazacak ve akıştan okuyacaksın.
- Akış nedir ve neden önemlidir?50 XP
- Batch vs stream100 XP
- Üreticiler ve hedefler100 XP
- Firehose delivery stream'lerini yönetme100 XP
- İlk akışa hazırlanma50 XP
- Roller oluşturma50 XP
- IAM kullanıcıları ve roller100 XP
- İzin pratiği100 XP
- S3 bucket oluşturma100 XP
- Firehose teslim akışıyla çalışma50 XP
- İlk Firehose akışını oluştur100 XP
- Bir Firehose akışına yazma100 XP
- Firehose verilerini okuma100 XP
2
Sunucusuz mimariye geçiş
Akış verisi yolculuğunda sıradaki adım, dönüştürücü lambda fonksiyonları kullanarak sunucusuz mimariye geçmek. Uygulamalı alıştırmalarla lambda katmanları ekleyecek ve belirli koşullarda lambda fonksiyonlarını tetikleyeceksin.
3
Akış verilerini analiz etme
Artık akış verisini encode/decode etmeye ve veriyi doğrudan akış içinde analiz etmeye hazırsın. Günlük araç en yüksek hızlarını elde etmek için birden fazla akış bile kullanacaksın.
4
Akış verilerini izleme ve görselleştirme
Bu son bölümde, günlüklere, metriklere, alarmlara ve panolara bakarak akışının performansını nasıl izleyeceğini keşfedeceksin. Elasticsearch kullanacak ve kendi Kibana panonu oluşturacaksın.
AWS Kinesis ve Lambda ile Akış Verileri
Kurs
Tamamlandı
