EclipseのSparkプロジェクト用MavenセットアップScala IDE

Question

Eclipseを使用してScala IDEを開発してSparkアプリケーションを開発しています。 イムMavenプロジェクトを使用して、しかし、私は次のように輸入sparkconにしようとすると：

import org.apache.spark.SparkConf 

私がエラーを持っている：

オブジェクトapacheのは、パッケージの組織のメンバーではありませんあなたは私を助けることができます設定 スパーク依存

Answer 1

pom.xmlファイルにSparkの依存関係を入れる必要があります。

<dependency> 
    <groupId>org.apache.spark</groupId> 
    <artifactId>spark-core_2.10</artifactId> 
    <version>2.2.0</version> 
</dependency> 

をあなたのpom.xmlでの依存関係に：今のところ、スパークの最新バージョンは置くことによって得ることができます。

Answer 2

https://sparktutorials.github.io/2015/04/02/setting-up-a-spark-project-with-maven.html

オンラインチュートリアル

https://www.youtube.com/watch?v=4sO-VgqHLp4