After doing these courses, I feel confident creating professional visualizations and dashboards
Shoebur RahmanProcurement Specialist, Giz Bangladesh
コース説明
不正検知で取引を安全に保ったり、交通信号で渋滞を緩和したり——私たちが日々意識せずに使っている仕組みを支えているのは何でしょうか？ その答えは、さまざまなソースから継続的に生成されるストリーミングデータと、Amazon Kinesis や AWS Lambda のようなサーバーレス技術です。
このコースでは、架空のデータエンジニア Cody を手助けしながら、これらの強力な技術を使いこなす方法を学びます。目標は、市が保有する車両からリアルタイムのストリーミングデータを収集・分析し、速度超過のような関連アラートをドライバーに送ることです。Amazon Kinesis と Firehose を使って数百万のソースからデータを取り込み、Kinesis Analytics でストリームを流れるデータをその場で分析します。さらに、AWS Lambda でサーバーレス関数を起動し、受信データに応じて条件付きでアクションを実行します。トレーニングの最後には、AWS QuickSight と CloudWatch を使ってライブの ElasticSearch ダッシュボードを作成できるようになり、Cody の意欲的なプロジェクトの達成にも貢献できるはずです。
このコースでは、架空のデータエンジニア Cody を手助けしながら、これらの強力な技術を使いこなす方法を学びます。目標は、市が保有する車両からリアルタイムのストリーミングデータを収集・分析し、速度超過のような関連アラートをドライバーに送ることです。Amazon Kinesis と Firehose を使って数百万のソースからデータを取り込み、Kinesis Analytics でストリームを流れるデータをその場で分析します。さらに、AWS Lambda でサーバーレス関数を起動し、受信データに応じて条件付きでアクションを実行します。トレーニングの最後には、AWS QuickSight と CloudWatch を使ってライブの ElasticSearch ダッシュボードを作成できるようになり、Cody の意欲的なプロジェクトの達成にも貢献できるはずです。
前提条件
カリキュラム
コース概要
1
クラウドでのストリーミング
この最初の章では、バッチ処理とストリーム処理の違いを学び、最初のストリームを作成し、権限を管理し、ストリームへの書き込みと読み取りを行います。
2
サーバーレスへ踏み出す
ストリーミングデータの次のステップとして、変換用の Lambda 関数を使ってサーバーレス化する方法を学びます。ハンズオン演習を通じて、Lambda レイヤーを追加し、特定の条件で Lambda 関数をトリガーします。
3
ストリーミングデータの分析
ここまでで、ストリーミングデータのエンコードとデコード、そしてストリーム上での直接分析を行う準備が整いました。複数のストリームを使って、日ごとの車両の最高速度も算出します。
4
監視と可視化
最後の章では、ログ、メトリクス、アラーム、ダッシュボードを使ってストリームのパフォーマンスを監視する方法を学びます。Elasticsearch を利用し、独自の Kibana ダッシュボードを構築します。
AWS Kinesis と Lambda で学ぶストリーミングデータ
コース修了
