After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
Descrierea cursului
Ce stă în spatele sistemelor pe care le folosim zilnic fără să ne dăm seama – de la detectarea fraudelor pentru a ne proteja tranzacțiile, până la semafoarele inteligente care fluidizează traficul? Răspunsul este datele în flux (date generate continuu din surse diverse) și tehnologiile serverless – precum Amazon Kinesis și AWS Lambda.
În acest curs, vei învăța cum să folosești aceste tehnologii puternice ajutând-o pe Cody, o ingineră de date fictivă. Obiectivul tău este să o ajuți să colecteze date în timp real de la vehiculele orașului, să le analizeze și să trimită alerte relevante – cum ar fi avertismente de viteză pentru șoferi. Folosind Amazon Kinesis și Firehose, vei învăța cum să preiei date din milioane de surse, apoi vei folosi Kinesis Analytics pentru a analiza datele pe măsură ce trec prin flux. Vei crea și funcții serverless în AWS Lambda care declanșează acțiuni în mod condiționat, în funcție de datele primite. La finalul cursului, vei ști cum să construiești dashboarduri live în ElasticSearch cu AWS QuickSight și CloudWatch – și, sperăm, o vei fi ajutat pe Cody să își ducă la bun sfârșit proiectul ambițios.
În acest curs, vei învăța cum să folosești aceste tehnologii puternice ajutând-o pe Cody, o ingineră de date fictivă. Obiectivul tău este să o ajuți să colecteze date în timp real de la vehiculele orașului, să le analizeze și să trimită alerte relevante – cum ar fi avertismente de viteză pentru șoferi. Folosind Amazon Kinesis și Firehose, vei învăța cum să preiei date din milioane de surse, apoi vei folosi Kinesis Analytics pentru a analiza datele pe măsură ce trec prin flux. Vei crea și funcții serverless în AWS Lambda care declanșează acțiuni în mod condiționat, în funcție de datele primite. La finalul cursului, vei ști cum să construiești dashboarduri live în ElasticSearch cu AWS QuickSight și CloudWatch – și, sperăm, o vei fi ajutat pe Cody să își ducă la bun sfârșit proiectul ambițios.
Cerințe prealabile
Curriculum
Structura cursului
1
Streaming în cloud
În acest prim capitol, vei afla care sunt diferențele dintre procesarea în lot și procesarea în flux, vei crea primul tău flux, îi vei gestiona permisiunile și vei scrie și citi date din el.
- Ce este streaming-ul și de ce contează?50 XP
- Loturi vs. flux100 XP
- Producători și destinații100 XP
- Gestionarea fluxurilor de livrare Firehose100 XP
- Pregătire pentru primul flux50 XP
- Crearea rolurilor50 XP
- Utilizatori IAM vs. roluri IAM100 XP
- Exercițiu cu permisiuni100 XP
- Crearea unui bucket S3100 XP
- Lucrul cu fluxul de livrare Firehose50 XP
- Creează primul tău stream Firehose100 XP
- Scrierea într-un stream Firehose100 XP
- Citirea datelor din Firehose100 XP
2
Trecerea la serverless
Următorul pas în parcursul tău cu date în flux este să înveți cum să folosești funcții lambda de transformare pentru a lucra serverless. Prin exerciții practice, vei adăuga straturi lambda și vei declanșa funcții lambda în condiții specifice.
3
Analiza datelor în flux
Acum ești pregătit să codezi și să decodezi date în flux și să le analizezi direct în flux. Vei folosi chiar mai multe fluxuri pentru a obține vitezele maxime zilnice ale vehiculelor.
4
Monitorizarea și vizualizarea datelor în flux
În acest capitol final, vei descoperi cum să monitorizezi performanța fluxului tău folosind jurnale, metrici, alarme și dashboarduri. Vei folosi Elasticsearch și îți vei construi propriul dashboard Kibana.
Date în flux cu AWS Kinesis și Lambda
Curs
finalizat
