LoginSignup
0
0

More than 5 years have passed since last update.

SPARK実行環境を作成する

Last updated at Posted at 2016-11-04

VMwareにUbuntu環境を作成する

①「新規仮想マシンの作成」をクリックする。
1_1.png

②【新規仮想マシン作成ウィザードへようこそ】
 「後でOSをインストール」をクリックする。
1_2.png

③【ゲストOSの選択】
 ゲストOSをLinux、バージョンをUbuntu64ビットを選択し次へをクリックする。
1_3.png

④【仮想マシンの名前】
 仮想マシン名と場所を任意に設定し次へをクリックする。
1_4.png

⑤【ディスク容量の指定】
 今回は単一ファイルを選択し次へをクリックする。
1_5.png

⑥【仮想マシンを作成する準備完了】
 完了をクリックする。
1_6.png

⑦Ubuntu環境が作成されているのを確認する。
1_7.png

⑧左側の作成した新規仮想マシンを右クリックし設定をクリックする。
1_8.png

⑨ハードウェアタブのCD/DVD(SATA)を選択し、Ubuntuのisoイメージファイルを指定しOKをクリックする。
1_9.png

⑩新規仮想マシンをダブルクリックする。
1_7.png

⑪【ようこそ】
 「Ubuntuをインストール」をクリックする。
1_11.png

⑫【Ubuntuのインストール準備】
 「続ける」をクリックする。
1_12.png

⑬【インストールの種類】
 「インストール」をクリックする。
1_13.png

⑭【どこに住んでいますか?】
 「続ける」をクリックする。
1_14.png

⑮【キーボードレイアウト】
 「続ける」をクリックする。
1_15.png

⑯【あなたの情報を入力してください】
 任意に入力し「続ける」をクリックする。
1_16.png

⑰【インストールが完了しました】
 「今すぐ再起動する」をクリックする。
1_17.png

VMwareToolsをインストールする

①Player⇒管理⇒VMware Tools のインストールをクリックする。
2_1.png

②VMwareToolsを開く。
2_2.png

③tar.gzファイルをデスクトップに展開する。
2_3.png

④端末より以下のコマンドを実行しインストールする。
  sudo ./vmware-install.pl
2_4.png

⑤インストール中に色々聞かれるが、とりあえずデフォルトのままENTER連打でOK。

JAVAをインストールする

①端末より以下のコマンドを実行しインストールする。
 sudo apt-add-repository ppa:webupd8team/java
 sudo apt-get update
 sudo apt-get install oracle-java8-installer

②以下のコマンドを入力し、インストールされていることを確認する。
 java -version
3-1.png

Scalaをインストールする

①端末より以下のコマンドを実行する。
 wget http://www.scala-lang.org/files/archive/scala-2.10.5.tgz
 sudo mkdir /usr/local/src/scala
 sudo tar xvf scala-2.10.5.tgz -C /usr/local/src/scala/

②bashrcの最下行に以下を追加する。
 export SCALA_HOME=/usr/local/src/scala/scala-2.10.5
 export PATH=$SCALA_HOME/bin:$PATH

③再起動する。
 . .bashrc

④インストールされていることを確認する。
 scala -version
4-1.png

gitをインストールする

①端末より以下のコマンドを実行する。
 sudo apt-get install git

②インストールされていることを確認する。
 git --version
5-1.png

SPARKをインストールする

①以下のサイトよりダウンロードする。(今回はVer1.5.0にします。)
 https://spark.apache.org/downloads.html
6-1.png

②端末より以下のコマンドを実行し、ダウンロードしたファイルを/opt/sparkにインストールする。
 sudo tar zxvf spark-1.5.0-bin-hadoop2.6.tgz -C /opt/
 cd /opt
 sudo ln -s spark-1.5.0-bin-hadoop2.6 spark

③端末より以下のコマンドを実行し、環境変数を設定する。
 sudo gedit /ec/profile.d/spark.sh
 
 spark.shに入力し保存する。
 export SPARK_HOME=/opt/spark
 
 設定を反映する。
 source /etc/profile

④インストールされていることを確認する。
 ${SPARK_HOME}/bin/spark-submit --version
6-2.png

sbtをインストールする

①以下のサイトよりダウンロードする。(今回はVer0.13.9にします。)
 https://dl.bintray.com/sbt/native-packages/sbt/0.13.9/sbt-0.13.9.tgz

②端末より以下のコマンドを実行し、ダウンロードしたファイルを/opt/sbtにインストールする。
 sudo tar zxvf sbt-0.13.9.tgz -C /opt/

③端末より以下のコマンドを実行し、環境変数を設定する。
 sudo gedit /ec/profile.d/sbt.sh
 
 sbt.shに入力し保存する。
 export SBT_HOME=/opt/sbt
 export PATH="$SBT_HOME/bin":"$PATH"

 設定を反映する。
 source /etc/profile

④コマンドが使用できるか確認する。
 sbt about
7-1.png

0
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
0