2017-11-10 21 views
0

私は、 "Analitycs for Apache Spark"の無料インスタンスを登録し、このtutorialに続いて、ローカルマシンからブルーミックスクラウドクラスター上のアプリケーションを実行するためのspark submit ibm ad hoc設計スクリプトを使用しました。問題は次のとおりです。「提出:私は、ターミナル・サイスまで(データセットvinorosso2.csvと私のfatJarが正しくアップロードされている)チュートリアルで説明し、すべてがうまく進まibm bluemixのspark-submit

./spark-submit.sh --vcap ./vcap.json --deploy-mode cluster --master 
https://spark.eu-gb.bluemix.net --files /home/vito/vinorosso2.csv 
--conf spark.service.spark_version=2.2.0 
/home/vito/workspace_2/sbt-esempi/target/scala-2.11/isolationF3.jar 
--class progettoSisDis.MasterNode 

このスクリプトを昼食たeverithingを作りました私は、スクリプトによって作成されたログファイルに行くと、このエラーメッセージがあった。この時点では「完全:

Submit job result: Invalid plan and spark version combination in HTTP request (ibm.SparkService.PayGoPersonal, 2.0.0)

Submission ID: ERROR: Problem submitting job. Exit

だから、火花を提出するApacheの火花のためAnalitycsの自由なインスタンスを登録するには十分ではなかったですジョブ?誰かが助けることを願っています。ちなみに、私のローカルマシン上では、私はintellijのアイデア(スカラ)で火花を使用しています。 Byyye

答えて

0

https://console.bluemix.net/docs/services/AnalyticsforApacheSpark/index-gentopic2.html#using_spark-submitからスパークバージョン1.6.xまたは2.0.xを使用する必要があります。送信ジョブはバージョン2.2.0に設定されています。 spark.service.spark_version=2.0.0を使用して送信してください(あなたのコードはこのバージョンのSparkで動作するものとします)。

+0

こんにちはshawdm、私はすでに成功なしでこれを試しました。 (ibm.SparkService.PayGoPersonal、2.2.0)の代わりに同じエラー・メッセージを報告します – vsam490

関連する問題