Apache sparkをpyspark用にubuntuにインストールする

Question

Apache spark 2.0をPython（pyspark）を使ってアクセスするUbuntu（16.04）ローカルマシンにインストールするための簡単なステップバイステップガイドです。私は彼らのほとんどが1つまたは他のエラーで終わるウェブを検索しようとしました。

は

Answer 1

礼儀：私はいくつかの手順は、だからここ

（少なくともUbuntuの16.04のため）予想より異なっている見たように、私はここに私の手順を書いていますhttps://www.santoshsrinivas.com/installing-apache-spark-on-ubuntu-16-04/

手順です

ステップ1：

http://spark.apache.org/downloads.html

ステップ2から最新事前に構築されたバージョンのダウンロード：を解凍して移動スパーク

cd ~/Downloads/ 
tar xzvf spark-2.0.1-bin-hadoop2.7.tgz 
mv spark-2.0.1-bin-hadoop2.7/ spark 
sudo mv spark/ /usr/lib/ 

ステップ3： SBT

をインストール

echo "deb https://dl.bintray.com/sbt/debian /" | sudo tee -a /etc/apt/sources.list.d/sbt.list 
sudo apt-key adv --keyserver hkp://keyserver.ubuntu.com:80 --recv 2EE0EA64E40A89B84B2DF73499E82A75642AC823 
sudo apt-get update 
sudo apt-get install sbt 

注： - この手順でいくつかの問題がある可能性があります。最後に提供されているリンクを参照してください。

手順4： Javaがインストールされていることを確認してください。そうでない場合は

sudo apt-add-repository ppa:webupd8team/java 
sudo apt-get update 
sudo apt-get install oracle-java8-installer 

ステップ5： 設定スパーク

cd /usr/lib/spark/conf/ 
cp spark-env.sh.template spark-env.sh 
vi spark-env.sh 

と

JAVA_HOME=/usr/lib/jvm/java-8-oracle 
SPARK_WORKER_MEMORY=4g 

ステップ6次の行を追加します。 のconfigure bashのファイルを。 ：

のbashrcファイルに以下のコピー

vi ~/.bashrc(if you want to use vi editor) 
subl ~/.basrc(if you want to use sublime) 

コマンドの下に使用してbashrcにファイルを開く

export JAVA_HOME=/usr/lib/jvm/java-8-oracle 
export SBT_HOME=/usr/share/sbt-launcher-packaging/bin/sbt-launch.jar 
export SPARK_HOME=/usr/lib/spark 
export PATH=$PATH:$JAVA_HOME/bin 
export PATH=$PATH:$SBT_HOME/bin:$SPARK_HOME/bin:$SPARK_HOME/sbin 

は、コマンドの下に

source ~/.bashrc 

ステップ7を使用して、bashのファイルを開始

今すぐお試しください

pyspark 

注：は、SBTのインストール（Ubuntuの16.04のための通常の場合）で動けなくなる場合には、この質問は広すぎる

https://askubuntu.com/questions/771839/problem-installing-package-git-all/771889#771889