2016-04-19 6 views
2

enter image description here日食:私はスパークパッケージをインポートしていたときの画像、その与える誤差に示すようにオブジェクトApacheはパッケージORG

のメンバーではありません。助けてください。私がそこにいると、「オブジェクトapacheはパッケージorgのメンバーではありません」と表示されます。 このエラーで検索したところ、スパークジャーがインポートされていないことがわかりました。だから、 "spark-assembly-1.4.1-hadoop2.2.0.jar"もインポートしました。

import org.apache.spark.{SparkConf, SparkContext} 
object ABC { 

def main(args: Array[String]){ 
//Scala Main Method 

println("Spark Configuration") 

val conf = new SparkConf() 

conf.setAppName("My First Spark Scala Application") 

conf.setMaster("spark://ip-10-237-224-94:7077") 

println("Creating Spark Context") 
} 
} 
+0

は、あなたのクラスパスに火花コアjarを追加しました:

またとJupyterノートブックを開始する必要がありますか? –

+0

実際には、私はどこに追加するすべての瓶とスパークの場所で、私はコピーすることができます正確にはいけない。あなたはちょうど指導できますか? –

+0

https://spark.apache.org/docs/1.2.0/quick-start.htmlの指示に従うだけです。 –

答えて

3

あなたの問題を解決する必要があり、あなたのクラスパスにspark-core jarファイルを追加:しかし、まだ同じerror.Belowは、私が実際に実行したいものです。 MavenGradleのようないくつかのビルドツールを使用している場合(そうでなければ、spark-coreには多くの依存関係がありますので、これらのツールで提供されるEclipseタスクを正しく使用するようにしてください)プロジェクト内のクラスパス。

+0

これはあなたが参照しているjarです - > "/root/.m2/repository/org /apache/spark/spark-core_2.10/1.4.1/spark-core_2.10-1.4.1.jar "?助けてください –

+0

はい、それは瓶です。 –

0

Jupyter Notebook内のScalaのコンテキストでこれを実行している場合は、このエラーが発生します。

https://github.com/apache/incubator-toree

とそのカーネルであなたのノートブックを作成する:あなたはアパッチToreeカーネルをインストールする必要があります。

pyspark 
関連する問題