AWS Data Pipeline

公開日時：2021年05月12日　/　最終更新日時：2021年10月31日

■AWS Data Pipelineの使いどころ

AWS のサービスが大量にありすぎてこれだという使いどころを見つけるのは難しいですが、単純な例としたらサーバのログを定期的に S3 へ持ってくるとか、各 AWS アカウントに散らばっている S3 上のデータを 1か所の S3 に集めるなどで利用します。

■AWS Data Pipelineの特徴

AWS Data Pipeline は、データの移動と変換を自動化するために使用できるウェブサービスです。
AWS Data Pipeline を使用すると、データ駆動型のワークフローを定義することができるので、以前のタスクの正常な完了を基にタスクを実行できます。
DynamoDBに設定して定期的にデータ取得ができます。