Amazon EMR(Elastic MapReduce)
■Amazon EMR の特徴
- EMR は Elastic MapReduce の略です。
- ビッグデータフレームワーク (Apache Hadoop や Apache Spark など) の実行を簡素化して、大量のデータを処理および分析できるサービスです。
- IoT などの大量のデータセットを処理および分析できます。
- カスタムポリシーによる自動スケーリングを使用できます。
- Apache Spark、Apache Hive、Apache HBase、Apache Flink、Presto などのオープンソースツールと、Amazon EC2 や Amazon S3 を組み合わせて、大規模なビッグデータを処理および分析できます。
※MapReduce とは米グーグル(Google)が開発した、大規模なデータを効率的に分散処理するためのプログラミングモデル。計算過程を“Map”と“Reduce”と呼ばれる二つのステップに分けて構成する。
http://e-words.jp/w/MapReduce.html
※Reduce とは減らす、下げるという意味です。
■Amazon EMR のユースケース
- ストリーム分析
- ETL(抽出、変換、読み込み)
- 機械学習(マシンラーニング)
- リアルタイムで大量のデータを分析することに特化しているイメージ
※ETL は Extract/Transform/Load の略で、Extract(データを抽出)/Transform(抽出データを変換・加工)/Load(データをロード)という工程を表しています。
Posted by 100%レンタルサーバーを使いこなすサイト管理人
このサイトはスパムを低減するために Akismet を使っています。コメントデータの処理方法の詳細はこちらをご覧ください。
タグ
/etc/aliases
AWS VPN CloudHub
コピペ
Serverspec
VMware
運用
コスト削減
公開鍵
データ転送量
検索エンジン
設計
インスタンス
Amazon Redshift
正引き
AWS CodeBuild
WebLogic
AWS Systems Manager
postfix
無線LAN
Linux
CentOS
decode
フェイルオーバー
初心者
PuTTY
トラブル
オレオレ証明書
さくらインターネット
MySQL
ルート証明機関
設定手順
VMware vSphere 6.0 ESXi
AWS SDK for Python
ディスク
Selenium
DKIM
クライアント証明書
teraterm
システム
プログラム
ディープラーニング
エックスサーバー
ansible-playbook
メトリクス
Webスクレイピング
暗号化
改行
Python3.6
障害対応
DomainKeys Identified Mail
Mailbox
java
コンパイル
Windows Server 2016
VMware vSphere Client
配列
文字列
AWS Auto Scaling
AES
GUI
SQL Server
パケット解析
crontab
仮想
認証局
IPv6
スクレイピング
メタキャラ
AWS CloudFormation
Webサーバー
1日で理解するDjango超基礎入門
名前解決
SSH
バージョン
NTP
リスト
PostgreSQL
https
形態素解析
VMware vSphere 6.5
openssl
VMware vSphere 6.5 ESXi
bash
redhat8
ライセンス
秘密鍵
IIS
スマホ
AWS Billing and Cost Management
無料
Python 3
CentOS7
インストール手順
Veritas NetBackup 8.0
データベースクラスタ
SSL証明書
keepalived
vMotion
AWS Lambda
お名前.com
systemctl
Perl
postgres
DNS
クラウド
AWS Step Functions(分散アプリケーションの調整)
EBS
unicode
Amazon RDS プロキシ
SFTP
Route53
プログラミング
Veritas
aliases
メール送信
Webプログラム
ファイル操作
Amazon RDS
パブリックドメイン
サービス
宮下剛輔
TigerVNC Server
ロール
RDS
マルウェア
レンタルサーバー
調査
RedHat 8系
Amazon CloudWatch メトリクス
CentOS6
Windows 認証
仕組み
パッチ
メリット
AWS
構成管理
ルート証明書
仮想マシン
VPS
WebLogic Server 12c
正規表現
リスト型
タイムゾーン
データベース
AMI
常時SSL化
SQL Server 認証
設定
Amazon
脆弱性
HTTPリクエスト
AWS SDK for Python (Boto3)
Yahoo!
boto3
Amazon SES
wireshark
さくらVPS
自動起動
分散アプリケーションの調整
DevOps
バックアップ
時刻同期
CPU
Wifi
カスタマイズ
マクロ
NATゲートウェイ
VMware vSphere ESXi
CloudFormation
S3
ロードバランサ―
Python 3.6.2
AWS Pricing Calculator
BIOS
Subversion
ハートビート
メモリ
Web
RedHat
Microsoft SQL Server
initdb
Windows 10
Systems Manager
無料SSL証明書
VMware vSphere
サーバー
SSLサーバー証明書
SPF
デジタル署名
電子署名
Python
ポリシー
grep
データストア
Ruby
DNSサーバー
プロトコル
自己証明書
引越
iptables
VMware ESXi 6.5
GET
smtp
ライブラリ
ルートテーブル
AWS認定試験
文字コード
rpm
エラー
VMware vSphere 6.0 ESXi Hypervisor
Webアプリケーション
AWS CLI
手順
Selenium WebDriver
SQLite
Oracle
OSS
関数
Storage vMotion
My VMware
CloudWatch
独自ドメイン
リトルサーバー
エクスポート
.vmdk
CGI
ドメイン名
用語
クライアント
systemd
AWS Direct Connect
Webアプリ
オープンソースソフトウェア
二重配列
メールボックス
PowerShell 6.0
パフォーマンス
Google
firewalld
utf-8
ansible
メール
コマンド
SMB
POST
AWS Client VPN
Amazon Lex
cron
インフラ構成管理
NIC
Maildir
時刻
Let's Encrypt
PowerShell
Amazon Elastic Block Store
スナップショット
Microsoft SQL Server 2016
pip
keytool
お名前.com 共用サーバー
コメントアウト
yum
負荷分散
淵上喜弘
Amazon EC2
共用サーバー
tigervnc
無料独自SSL証明書
AWS SSM
headless
Apache
仮想化
IPアドレス
EC2
SASL
timeout
ストレージ
プラグイン
bind
Windows
お名前レンタルサーバー
EC2インスタンス
AWS Managed VPN
マルチパス
アップデート
スクリプト
HPE
PowerShell 6.0.3
リストア
iLO
タイムアウト
html
Amazon RDS Proxy(Amazon RDS プロキシ)
機械学習
ログ
仮想環境
AWS WAF
vCenter Server
VMware-Tools
encode
playbook
公開鍵暗号方式
Python 3.6.3
FTP
TLS
インストール
SQL Server Management Studio
パース
AWS CAF(Cloud Adoption Framework)
RDS for SQL Server
WordPress
AWS Site-to-Site VPN
Red Hat 7
仮想化環境
Sophos
AWS CodeCommit
ドメイン
仮想アプライアンス
Zabbix
PhantomJS
Amazon Route 53
EBS ID
json
削除
AWS Step Functions
Amazon EBS
SQL文
トラブルシューティング
Route 53
serverspec-runner
フリー
Lambda
iSCSI
AWS Storage Gateway
冗長化
Windows 7
css
アベイラビリティゾーン
VPC
psql
Unix
リダイレクト
ディクショナリ型
heartbeat
Facebook
httpd
ELB
Chef
NAT
インポート
Google Chrome
クライアント/サーバー
VNC Server
システムクロック
パソコン
AWS Backup
Django
ファイアウォール
インフラ
ログイン
リポジトリ
DB
インターネット
PHP
Deep Learning
HTTP
Amazon CloudWatch
トリガー
WireShark v2.6.2
iLO4
Ubuntu
SSL/TLS
EC2 インスタンス
Web アプリ
違い
Amazon S3
Elastic IP
vnc
セキュリティ
Amazon RDS Proxy
Python 3.6
AWS Application Discovery Service
Microsoft SQL Server Management Studio
ネットワーク
VMware vSphere vCenter
メタ文字
アップグレード
SSL
プライベートサブネット
格安レンタルサーバー
ネームサーバー
CSR
nmcli
Apache Subversion
aws ec2 インスタンス
.htaccess
ISO
SVN
ハードウェアクロック
逆引き
最近の投稿
- 【レンタルサーバー】WordPress用にPHPのバージョンアップをする方法【エックスサーバー】
- 【AWS】AWS SDK for Python (Boto3) で CloudWatch のメトリクスを取得する手順
- 【AWS】AWS SDK for Ruby (3.0.1) で CloudWatch のメトリクスを取得する手順
- AWS Managed VPN
- Amazon Lex
- Amazon RDS Proxy(Amazon RDS プロキシ)
- AWS Step Functions(分散アプリケーションの調整)
- 用語集(AWS 認定試験で出てくる IT 用語)
- AWS認定試験について
- AWS ADS(Application Discovery Service)
- AWS CAF(Cloud Adoption Framework)
- AWS Client VPN
- AWS Site-to-Site VPN
- AWS VPN CloudHub
- AWS WAF
- Amazon Redshift
- AWS OpsWorks
- AWS CloudFormation
- AWS Auto Scaling
- AWS Systems Manager
- AWS Billing and Cost Management
- AWS セキュリティ
- AWS Pricing Calculator
- AWS CodeBuild
- AWS CodeCommit
- AWS CodeDeploy
- AWS CodePipeline
- Amazon CloudWatch
- AWS Global Accelerator
- AWS Snowball
- AWS Fargate
- Amazon Inspector
- Amazon Kinesis
- AWS DataSync
- Amazon Lightsail
- AWS IAM
- Amazon API Gateway
- Amazon Elasticsearch Service
- AWS Storage Gateway
- AWS IoT(AWS IoT Core)
カテゴリー
- Ansible (10)
- Apache(httpd) (4)
- AWS (181)
- AWS認定試験 (73)
- CentOS6 (RedHat6) (44)
- CentOS7 (RedHat7) (107)
- CentOS8 (RedHat8) (14)
- Chef (2)
- cron (1)
- DevOps (2)
- DNS(ドメイン) (27)
- Docker (1)
- HTML/CSS (13)
- Linux (113)
- MySQL (12)
- NetBackup (4)
- Oracle (4)
- PHP (15)
- PostgreSQL (38)
- PowerShell (9)
- Python (61)
- RedHat (10)
- Ruby (3)
- Serverspec (4)
- SQL Server (20)
- SSL/TLS (34)
- Subversion (4)
- VMware (46)
- VPS (12)
- Webアプリ (35)
- Windows (22)
- WordPress (46)
- Zabbix (9)
- お得情報 (13)
- その他 (1)
- インフラ (44)
- クラウド (4)
- コマンド (7)
- コンテナ (1)
- シェルスクリプト (6)
- セキュリティ (67)
- データベース (59)
- ネットワーク (79)
- バックアップ (6)
- プログラム (61)
- ホームページ作成 (15)
- メール (18)
- レンタルサーバー (84)
- 仮想環境 (54)
- 機械学習 (10)
- 正規表現 (4)
- 物理 (8)
- 雑談 (5)
Copyright 100%レンタルサーバーを使いこなすサイト All rights reserved.
コメントを残す