2016-04-10 10 views
1

Sparkの新機能です。手動でマスターを開始しようとしています(Windows 10ではMINGW64を使用しています)。 Windowsでspark用のmasterを起動できませんでした。

私はこれを行う

~/Downloads/spark-1.5.1-bin-hadoop2.4/spark-1.5.1-bin-hadoop2.4/sbin $ ./start-master.sh

私だ私が間違っているのは何これらのログ、

ps: unknown option -- o 
Try `ps --help' for more information. 
starting org.apache.spark.deploy.master.Master, logging to /c/Users/Raunak/Downloads/spark-1.5.1-bin-hadoop2.4/spark-1.5.1-bin-hadoop2.4/sbin/../logs/spark--org.apache.spark.deploy.master.Master-1-RINKU-CISPL.out 
ps: unknown option -- o 
Try `ps --help' for more information. 
**failed to launch org.apache.spark.deploy.master.Master:** 
    Spark Command: C:\Program Files\Java\jre1.8.0_77\bin\java -cp C:/Users/Raunak/Downloads/spark-1.5.1-bin-hadoop2.4/spark-1.5.1-bin-hadoop2.4/sbin/../conf\;C:/Users/Raunak/Downloads/spark-1.5.1-bin-hadoop2.4/spark-1.5.1-bin-hadoop2.4/lib/spark-assembly-1.5.1-hadoop2.4.0.jar;C:\Users\Raunak\Downloads\spark-1.5.1-bin-hadoop2.4\spark-1.5.1-bin-hadoop2.4\lib\datanucleus-api-jdo-3.2.6.jar;C:\Users\Raunak\Downloads\spark-1.5.1-bin-hadoop2.4\spark-1.5.1-bin-hadoop2.4\lib\datanucleus-core-3.2.10.jar;C:\Users\Raunak\Downloads\spark-1.5.1-bin-hadoop2.4\spark-1.5.1-bin-hadoop2.4\lib\datanucleus-rdbms-3.2.9.jar -Xms1g -Xmx1g org.apache.spark.deploy.master.Master --ip RINKU-CISPL --port 7077 --webui-port 8080 

、私はスパークのためにも、Hadoopのパッケージを設定する必要があるでしょうか?

答えて

1

ただ、ここで答えを見つけました:https://spark.apache.org/docs/1.2.0/spark-standalone.html

「注:起動スクリプトは、現在のWindowsをサポートしていないWindows上でスパーククラスタを実行するには、手でマスターと労働者を起動するには。」

私は窓が火花のための良い選択ではないと思う、とにかく幸運!

+0

spark-class org.apache.spark.deploy.master.Masterを試してください。ワーカー向けspark-class org.apache.spark.deploy.worker.Worker spark:// MASTER_IP:MASTER_PORT – Rdesmond

関連する問題