Amazon EMR(Elastic MapReduce)
■Amazon EMR の特徴
- EMR は Elastic MapReduce の略です。
- ビッグデータフレームワーク (Apache Hadoop や Apache Spark など) の実行を簡素化して、大量のデータを処理および分析できるサービスです。
- IoT などの大量のデータセットを処理および分析できます。
- カスタムポリシーによる自動スケーリングを使用できます。
- Apache Spark、Apache Hive、Apache HBase、Apache Flink、Presto などのオープンソースツールと、Amazon EC2 や Amazon S3 を組み合わせて、大規模なビッグデータを処理および分析できます。
※MapReduce とは米グーグル(Google)が開発した、大規模なデータを効率的に分散処理するためのプログラミングモデル。計算過程を“Map”と“Reduce”と呼ばれる二つのステップに分けて構成する。
http://e-words.jp/w/MapReduce.html
※Reduce とは減らす、下げるという意味です。
■Amazon EMR のユースケース
- ストリーム分析
- ETL(抽出、変換、読み込み)
- 機械学習(マシンラーニング)
- リアルタイムで大量のデータを分析することに特化しているイメージ
※ETL は Extract/Transform/Load の略で、Extract(データを抽出)/Transform(抽出データを変換・加工)/Load(データをロード)という工程を表しています。
Posted by 100%レンタルサーバーを使いこなすサイト管理人
このサイトはスパムを低減するために Akismet を使っています。コメントデータの処理方法の詳細はこちらをご覧ください。
タグ
PostgreSQL
削除
Microsoft SQL Server 2016
EC2
iSCSI
Subversion
データストア
OSS
Windows
構成管理
iLO4
秘密鍵
iLO
メタ文字
PhantomJS
データベース
POST
Microsoft SQL Server Management Studio
セキュリティ
NTP
Amazon CloudWatch メトリクス
AWS CodeBuild
Sophos
Amazon Elastic Block Store
インフラ
DomainKeys Identified Mail
CentOS6
仕組み
Web アプリ
リダイレクト
HTTPリクエスト
headless
Unix
Apache
ロードバランサ―
SSH
Amazon RDS Proxy(Amazon RDS プロキシ)
さくらVPS
コメントアウト
Serverspec
keytool
ディスク
NATゲートウェイ
公開鍵暗号方式
Elastic IP
AWS CAF(Cloud Adoption Framework)
Amazon Route 53
無料独自SSL証明書
自動起動
改行
firewalld
仮想マシン
AWS VPN CloudHub
AWS Managed VPN
無線LAN
1日で理解するDjango超基礎入門
共用サーバー
コマンド
Oracle
EC2インスタンス
My VMware
アベイラビリティゾーン
パケット解析
Wifi
マルチパス
AMI
serverspec-runner
電子署名
VPS
AWS Billing and Cost Management
boto3
タグ
ルート証明機関
VMware vSphere vCenter
時刻同期
timeout
文字コード
常時SSL化
EC2 インスタンス
マクロ
WireShark v2.6.2
ログイン
機械学習
AWS Backup
RDS for SQL Server
ネームサーバー
設定手順
VMware ESXi 6.5
スクレイピング
リトルサーバー
DNS
Webサーバー
pip
SSLサーバー証明書
CentOS
Windows 認証
Python3.6
パソコン
PowerShell 6.0.3
Amazon
Python
PuTTY
playbook
SQLite
wireshark
Storage vMotion
ハードウェアクロック
脆弱性
トリガー
Google
検索エンジン
淵上喜弘
インスタンス
名前解決
SVN
Route53
teraterm
インストール手順
ルート証明書
Django
postgres
冗長化
引越
プログラミング
NAT
逆引き
Google Chrome
バージョン
GUI
nmcli
メール送信
TLS
メタキャラ
keepalived
仮想
VMware vSphere 6.5 ESXi
vCenter Server
WebLogic
インポート
AWS Direct Connect
NIC
css
時刻
ansible-playbook
AES
プロトコル
違い
decode
負荷分散
psql
VMware vSphere ESXi
CGI
bind
Route 53
ディクショナリ型
AWS Auto Scaling
aliases
Mailbox
VMware vSphere Client
お名前レンタルサーバー
vMotion
DevOps
ansible
openssl
Perl
initdb
レンタルサーバー
utf-8
json
crontab
プライベートサブネット
初心者
WordPress
ロール
無料
Chef
MySQL
アップデート
https
PowerShell 6.0
Selenium
ISO
エクスポート
tigervnc
Python 3.6
ディープラーニング
ルートテーブル
TigerVNC Server
Maildir
ELB
redhat8
公開鍵
Veritas NetBackup 8.0
VMware vSphere
BIOS
無料SSL証明書
EBS ID
AWS WAF
リストア
VNC Server
aws ec2 インスタンス
タイムアウト
仮想アプライアンス
メモリ
自己証明書
RedHat
クライアント/サーバー
インフラ構成管理
Webアプリケーション
Yahoo!
AWS CodeCommit
FTP
systemctl
コスト削減
SASL
Deep Learning
Python 3
AWS CLI
AWS Application Discovery Service
DB
AWS Storage Gateway
VMware vSphere 6.5
仮想環境
Python 3.6.2
vnc
Amazon RDS Proxy
配列
unicode
サーバー
ベリタス
ログ
smtp
.htaccess
/etc/aliases
AWS CloudFormation
ライブラリ
Ubuntu
リスト
Systems Manager
CloudFormation
yum
Selenium WebDriver
トラブル
IIS
AWS Pricing Calculator
AWS Site-to-Site VPN
お名前.com 共用サーバー
クライアント証明書
SFTP
設計
マルウェア
bash
Zabbix
ライセンス
SSL証明書
Ruby
お名前.com
スマホ
ドメイン名
Amazon Redshift
Amazon EC2
CentOS7
Linux
IPアドレス
VMware vSphere 6.0 ESXi Hypervisor
デジタル署名
Python 3.6.3
SSL
Microsoft SQL Server
文字列
java
スナップショット
CloudWatch
サービス
正規表現
Amazon S3
systemd
DKIM
rpm
クライアント
Webスクレイピング
AWS認定試験
手順
認証局
.vmdk
AWS Step Functions(分散アプリケーションの調整)
Windows Server 2016
ドメイン
コンパイル
リスト型
Apache Subversion
さくらインターネット
メールボックス
暗号化
フェイルオーバー
cron
タイムゾーン
カスタマイズ
AWS Step Functions
IPv6
Windows 7
PHP
SSL/TLS
障害対応
CSR
Windows 10
オレオレ証明書
HPE
S3
メリット
SQL Server Management Studio
Webプログラム
バックアップ
Amazon RDS
AWS Client VPN
Amazon SES
独自ドメイン
Red Hat 7
DNSサーバー
Facebook
heartbeat
仮想化環境
SPF
grep
アップグレード
SQL Server 認証
EBS
ファイアウォール
VMware
エックスサーバー
インターネット
VMware-Tools
GET
Amazon CloudWatch
PowerShell
SQL Server
スクリプト
CPU
エラー
用語
Amazon Lex
ネットワーク
プログラム
AWS Lambda
Let's Encrypt
パッチ
VMware vSphere 6.0 ESXi
Amazon EBS
Veritas
WebLogic Server 12c
オープンソースソフトウェア
運用
ストレージ
Webアプリ
仮想化
html
postfix
分散アプリケーションの調整
ポリシー
パフォーマンス
データ転送量
RedHat 8系
SQL文
インストール
形態素解析
システム
ファイル操作
システムクロック
リポジトリ
Amazon Web Services
AWS SSM
SMB
パース
VPC
正引き
ハートビート
HTTP
プラグイン
格安レンタルサーバー
Web
httpd
コピペ
メール
データベースクラスタ
パブリックドメイン
iptables
設定
Lambda
フリー
RDS
関数
Amazon RDS プロキシ
AWS Systems Manager
AWS
クラウド
調査
宮下剛輔
二重配列
encode
トラブルシューティング
最近の投稿
- AWS Managed VPN
- Amazon Lex
- Amazon RDS Proxy(Amazon RDS プロキシ)
- AWS Step Functions(分散アプリケーションの調整)
- 用語集(AWS 認定試験で出てくる IT 用語)
- AWS認定試験について
- AWS ADS(Application Discovery Service)
- AWS CAF(Cloud Adoption Framework)
- AWS Client VPN
- AWS Site-to-Site VPN
- AWS VPN CloudHub
- AWS WAF
- Amazon Redshift
- AWS OpsWorks
- AWS CloudFormation
- AWS Auto Scaling
- AWS Systems Manager
- AWS Billing and Cost Management
- AWS セキュリティ
- AWS Pricing Calculator
- AWS CodeBuild
- AWS CodeCommit
- AWS CodeDeploy
- AWS CodePipeline
- Amazon CloudWatch
- AWS Global Accelerator
- AWS Snowball
- AWS Fargate
- Amazon Inspector
- Amazon Kinesis
- AWS DataSync
- Amazon Lightsail
- AWS IAM
- Amazon API Gateway
- Amazon Elasticsearch Service
- AWS Storage Gateway
- AWS IoT(AWS IoT Core)
- Amazon Neptune
- Amazon SQS
- AWS Elastic Beanstalk
カテゴリー
- Ansible (10)
- Apache(httpd) (4)
- AWS (179)
- AWS認定試験 (73)
- CentOS6 (RedHat6) (44)
- CentOS7 (RedHat7) (107)
- CentOS8 (RedHat8) (14)
- Chef (2)
- cron (1)
- DevOps (2)
- DNS(ドメイン) (27)
- Docker (1)
- HTML/CSS (13)
- Linux (113)
- MySQL (12)
- NetBackup (4)
- Oracle (4)
- PHP (15)
- PostgreSQL (38)
- PowerShell (9)
- Python (60)
- RedHat (10)
- Ruby (2)
- Serverspec (4)
- SQL Server (20)
- SSL/TLS (34)
- Subversion (4)
- VMware (46)
- VPS (12)
- Webアプリ (35)
- Windows (22)
- WordPress (46)
- Zabbix (9)
- お得情報 (13)
- その他 (1)
- インフラ (44)
- クラウド (4)
- コマンド (7)
- コンテナ (1)
- シェルスクリプト (6)
- セキュリティ (67)
- データベース (59)
- ネットワーク (79)
- バックアップ (6)
- プログラム (61)
- ホームページ作成 (15)
- メール (18)
- レンタルサーバー (83)
- 仮想環境 (54)
- 機械学習 (10)
- 正規表現 (4)
- 物理 (8)
- 雑談 (5)
Copyright 100%レンタルサーバーを使いこなすサイト All rights reserved.
コメントを残す