Amazon EMR(Elastic MapReduce)

公開日時:2020年11月30日 / 最終更新日時:2021年10月31日

■Amazon EMR の特徴

 

※MapReduce とは米グーグル(Google)が開発した、大規模なデータを効率的に分散処理するためのプログラミングモデル。計算過程を“Map”と“Reduce”と呼ばれる二つのステップに分けて構成する。

http://e-words.jp/w/MapReduce.html

 

※Reduce とは減らす、下げるという意味です。

 

 

■Amazon EMR のユースケース

※ETL は Extract/Transform/Load の略で、Extract(データを抽出)/Transform(抽出データを変換・加工)/Load(データをロード)という工程を表しています。

 

EMR と Apache Hive と DynameDB でデータを分析できる

EMR と Apache と DynamoDB の組み合わせでデータを分析することができます。

DynamoDB にはデータを保存します。

 

 

Posted by 100%レンタルサーバーを使いこなすサイト管理人

コメントを残す

メールアドレスが公開されることはありません。

AlphaOmega Captcha Medica  –  What Do You See?
     
 

このサイトはスパムを低減するために Akismet を使っています。コメントデータの処理方法の詳細はこちらをご覧ください

Secured By miniOrange