理論

1. AWS IoT Core

• AWS IoT Core は、IoTデバイス（例：センサー）から送られてくるデータを処理するための完全マネージドサービスです。

• MQTTプロトコルをネイティブでサポートしており、センサーからのデータを直接受信できます。

• 高可用性とスケーラビリティを提供し、デバイスの増加やネットワークの不安定さがあってもデータを失わないようにします。

• センサーからMQTTプロトコルを使用して送られるデータを受信。

• 受信したデータを Kinesis Data Firehose に転送。

2. Amazon Kinesis Data Firehose

• Kinesis Data Firehose は、リアルタイムデータストリームを処理・転送するための完全マネージドサービスです。

• データを Amazon S3、Amazon Redshift、Amazon Elasticsearch Service などのターゲットストレージに送ることができます。

• データ形式の変換やバッチ処理をサポートしています。

• AWS IoT Core からデータを受け取り、Amazon S3 などのターゲットに信頼性を持って送信。

• 高い耐障害性を提供し、データの紛失を防ぎます。

3. AWS Lambda

• AWS Lambda は、イベント駆動型のサーバーレスコンピューティングサービスで、コードを実行してデータを処理することができます。

• データの形式変換、クリーニング、分析など、カスタムロジックを柔軟に実装可能です。

• 必要なときだけ実行されるため、コスト効率が高い。

• Kinesis Data Firehose にデータを送信する前に、AWS IoT Core から受信したデータを処理。

• データ形式の変換やメタデータの追加を行い、ターゲットに適した形に整えます。

4. Amazon S3

• Amazon S3 は、オブジェクトストレージサービスで、データを安全かつ長期的に保存することができます。

• 高い耐久性と冗長性を備えており、データの安全性を確保します。

• センサーから送られてきたデータの最終的な保存先として機能。

• 保存されたデータは、後で分析やアーカイブに利用可能。

全体の流れ：

1. センサーがデータを送信：センサーは MQTTプロトコル を使ってデータを AWS IoT Core に送信。

2. AWS IoT Coreがデータを転送：受信したデータを Kinesis Data Firehose に渡す。

3. データ変換：Kinesis Data Firehoseが AWS Lambda をトリガーしてデータを変換・処理。

4. データ保存：変換後のデータを Amazon S3 に安全に保存。

まとめ：

• AWS IoT Core：デバイスデータの受信。

• Kinesis Data Firehose：データを信頼性をもって転送。

• AWS Lambda：データの変換・加工。

• Amazon S3：最終的なデータの保存と管理。

実践

一問道場