LoginSignup
0
0

[AWS認定]EMR関連まとめ

Posted at

EMRとは

  • Elastic MapReduc
  • 膨大なデータを分析・処理するためのHadoopクラスタ(ビッグデータ)の構築を支援
  • クラスタは数百台のEC2インスタンスで構成
    オートスケーリングやSpotInstanceと統合
  • Apache Spark, HBase, Presto, Flink などに対応
  • EMRがプロビジョニングや構成設定をしてくれる(マネージド)
  • オートスケーリングやSpotインスタンス

データストア

スクリーンショット 2023-12-05 11.02.06.png

S3, DynamoDB, Redshift などのデータストアが利用可能

EMRとRedshiftとの違い

  • 試験の選択肢としてEMRとRedshiftが同時に出てくることが多い
  • EMRはビッグデータ分散処理のためのフレームワーク
    非構造データも扱える
  • Redshiftはビッグデータの収集・分析・集計
    構造データのみを扱う
0
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
0