More than 5 years have passed since last update.

Apache Spark Starter Kits

Last updated at 2015-09-25Posted at 2015-09-09

対象

Apache Sparkをやるにはどれから始めたらいいかわからない方。

Apache Spark関連のリンクをまとめます。主に英語がおおいです。Edxのコースはとてもお勧めです。動画で説明があり、Pythonで実際にコードをかいて学んでいくのでとても理解しやすいです。
I will keep you updated! なにか他にいいリソースありましたらコメントください。

本家

http://spark.apache.org/
Quick start
- https://spark.apache.org/docs/latest/quick-start.html

Overview

Stanford CS347
http://www.cs.berkeley.edu/~rxin/talks/2015-05-18_cs347-stanford.pdf

Compile and Run Example

http://qiita.com/giwa/items/d701ad1f9bda42654093

このポストは1.4ですが、1.5でも同じはずです。

Edx

Introduction to Big Data with Apache Spark

Scalable Machine Learning

Bigdata university

Papers

RDD
- http://people.csail.mit.edu/matei/papers/2012/nsdi_spark.pdf
Shark(Spark SQL)
- http://people.csail.mit.edu/matei/papers/2013/sigmod_shark.pdf
Spark (1.4) profile
- https://www.usenix.org/system/files/conference/nsdi15/nsdi15-paper-ousterhout.pdf
Spark streaming
- http://people.csail.mit.edu/matei/papers/2012/hotcloud_spark_streaming.pdf
- http://people.csail.mit.edu/matei/papers/2013/sosp_spark_streaming.pdf

日本の企業の方のslide share(NTTな方々がおおいですね。

Books

Learning Spark
- http://shop.oreilly.com/product/0636920028512.do
Advanced Analytics with Spark
- http://shop.oreilly.com/product/0636920035091.do
Spark in Action (in progress)
- https://www.manning.com/books/spark-in-action
Apache Spark入門動かして学ぶ最新並列分散処理フレームワーク (2015/10/20発売　NTTDATAから)
- http://www.amazon.co.jp/Apache-Spark%E5%85%A5%E9%96%80-%E5%8B%95%E3%81%8B%E3%81%97%E3%81%A6%E5%AD%A6%E3%81%B6%E6%9C%80%E6%96%B0%E4%B8%A6%E5%88%97%E5%88%86%E6%95%A3%E5%87%A6%E7%90%86%E3%83%95%E3%83%AC%E3%83%BC%E3%83%A0%E3%83%AF%E3%83%BC%E3%82%AF-NEXT-ONE-%E6%A0%AA%E5%BC%8F%E4%BC%9A%E7%A4%BENTT%E3%83%87%E3%83%BC%E3%82%BF/dp/4798142662/ref=pd_rhf_ee_s_cp_30?ie=UTF8&refRID=18NG6YKBRET078VK7FRK

探すといろいろでてきますが、どうなんでしょうか。以下はまだ読んでません。

Spark cookbook
- https://www.packtpub.com/big-data-and-business-intelligence/spark-cookbook
Fast dataprocessing with Spark
- https://www.packtpub.com/big-data-and-business-intelligence/fast-data-processing-spark-second-edition
Machine Learning with Spark
- https://www.packtpub.com/big-data-and-business-intelligence/machine-learning-spark
Apache Spark Graph processing
- https://www.packtpub.com/big-data-and-business-intelligence/apache-spark-graph-processing
Mastering Apache Spark
- https://www.packtpub.com/big-data-and-business-intelligence/mastering-apache-spark

Spark summit

Others

AMP Lab, where spark was invented
https://amplab.cs.berkeley.edu/
Reynold personal page (Spark PMC)
http://www.cs.berkeley.edu/~rxin/
Matei Zaharia personal page (Spark inventor, PMC, CEO of Databricks and Associate Professor in MIT)
http://people.csail.mit.edu/matei/
MLbase, base of Spark MLlib
http://mlbase.org/

Meetup in Japan

Commit email (kouさんに作っていただきました。感謝。

http://www.commit-email.info

差分が色付けされているので本家のcommit emailよりも見やすいです。下記で購読できます。

To: apache-spark@ml.commit-email.info
Cc: null@commit-email.info
Subject: Subscribe
--
subscribe

JIRA バグがあったらこちらへ報告

https://issues.apache.org/jira/browse/spark

Contribution したい方

You get articles that match your needs
You can efficiently read back useful information
You can use dark theme

What you can do with signing up