Spark on YARN のアーキテクチャ
前回も触れましたが、Spark のクラスタマネージャには、Standalone とMesos とYARN が存在します。ここではYARN 上でのSpark アプリケーションがどのように実行される...
11
8
Comment0
4 search resultsShowing 1~4 results
Stocked
You need to log-in
Spark のアーキテクチャ概要
Spark アプリケーションの実行の仕組みについて、Apache Spark のサイトを読んでみてもどうもよくわからないので、自分なりにまとめてみました。まずは、概念的ですがSpark のコンポ...
3
3
Comment0
HDInsight Spark の構成
Azure で提供しているHDInsight Spark は、現在のところ 1.5.2、1.6.2、1.6.3、2.0.2、2.1.0 (プレビュー) がリリースされています。各ノードは全てLi...
5
3
Comment0
Azure 上でSpark を使うメリット
ビッグデータ分析基盤として名を馳せている Apache Spark ですが、Azure 上では、HDInsight Spark という名前で提供されています。HDInsight Spark はた...
7
2
Comment0
4 search resultsShowing 1~4 results
Qiita is a knowledge sharing service for engineers.
- You can follow users and tags
- You can stock useful information
- You can make edit suggestions for articles