2016-10-21 14 views
2

設定済みのポートでapache zeppelinを起動して正常に実行しました。 私はApache zeppelinエラー

sc.version 
println(zeppelin) 

のような単純なスパークコマンドを実行していますが、私はちょうど私のコンソール上の任意のエラー出力せずに実行ボタンの近くに「ERROR」の文字列を見ることができます。

マイ・エラー・ログ:

ERROR [2016年10月21日22:38:05837({プール-2-スレッド-6} Job.java [実行]:189) - ジョブが失敗した org.apache.spark.SparkException:spark.driver.extraClassPathとSPARK_CLASSPATHの両方が見つかりました。前者のみを使用してください。 at org.apache.spark.SparkConf $$ anonfun $ validateSettings $ 7 $$ anonfun $ apply $ 8.apply(SparkConf.scala:492) at org.apache.spark.SparkConf $$ anonfun $ validateSettings $ 7 $$ anonfun $ apply $ 8.apply(SparkConf.scala:490) at scala.collection.immutable.List.foreach(List.scala:318) at org.apache.spark.SparkConf $$ anonfun $ validateSettings $ 7.apply(SparkConf.scala: 490) at org.apache.spark.SparkConf $$ anonfun $ validateSettings $ 7.apply(SparkConf.scala:478) at scala.Option.foreach(Option.scala:236) at org.apache.spark.SparkConf。 (SparkContext.scala:398) でorg.apache.zeppelin.spark.SparkInterpreter.createSparkContext_1(SparkInterpreter.java:440)SparkInterpreter.createSparkContext(SparkInterpreter.java:354) at org.apache.zeppelin.spark.SparkInterpreter.getSparkContext(SparkInterpreter.java:137) at org.apache.zeppelin.spark。 org.apache.zeppelin.interpreter.LazyOpenInterpreter.interpretでorg.apache.zeppelin.interpreter.LazyOpenInterpreter.open(LazyOpenInterpreter.java:69) でSparkInterpreter.open(SparkInterpreter.java:743) (LazyOpenInterpreter.java:93) at org.apache.zeppelin.interpreter.remote.RemoteInterpreterServer $ InterpretJob.jobRun(RemoteInterpreterServer.java:341) at org.apache.zeppelin.scheduler.Job.run(Job.java:176) at org.apache。 zeppelin.scheduler.FIFOScheduler $ 1.run(FIFOScheduler.java:139) at java.util.conc (Runtime).Executors $ RunnableAdapter.call(Executors.java:511) at java.util.concurrent.FutureTask.run(FutureTask.java:266) at java.util.concurrent.ScheduledThreadPoolExecutor $ ScheduledFutureTask.access $ 201(ScheduledThreadPoolExecutor.java :180) java.util.concurrent.ThreadPoolExecutorでjava.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) でjava.util.concurrent.ScheduledThreadPoolExecutor $ ScheduledFutureTask.run(ScheduledThreadPoolExecutor.java:293) でjava.lang.Thread.runで$ Worker.run(ThreadPoolExecutor.java:617) (Thread.java:745)

はまた、私はにスパークし、Javaのパスを言及しています。

答えて

0

私は知っている、これは非常に遅い答えですが、同様の問題に直面しているすべての人。スパークのためのインタプリタモードで

があっても、私は同様の問題があったが、私はいくつかの外部依存{0.11.0:algebird-core_2.11 com.twitter}を添加しました。いずれかのコンポーネントに依存関係が追加されている場合、依存関係がZeppelinバージョンと互換性がないか、リモートに存在しない場合があります。その依存関係を取り除くと、私はZeppelinコンソールで他のエラーを見始めました。

念のため、「zeppelin.spark.printREPLOutputは」それは本当だけで、デフォルトでは一般的に、に設定されていますが、念のため!

関連する問題