sc.textFile私はスカラ座以下 のためのIntelliJを使用していますテキストファイル

Question

でシンボルを解決することはできませんが、私のコードです：

import org.apache.spark.SparkConf 
import org.apache.spark.sql._ 
import org.apache.spark.sql.types._ 
import org.apache.spark.SparkContext 
import org.apache.spark.SparkContext._ 
object XXXX extends App{ 

    val sc = new SparkConf() 
    val DataRDD = sc.textFile("/Users/itru/Desktop/XXXX.bz2").cache() 
} 

私build.sbtファイルには、以下が含まれます

name := "XXXXX" 
version := "1.0" 
scalaVersion := "2.11.8" 
libraryDependencies ++= Seq("org.apache.spark" %% "spark-core" % "1.5.2" %"provided", 
"org.apache.spark" %% "spark-sql" % "1.5.2" % "provided") 

パッケージがダウンロードされますが、まだ私はエラーを参照してください "textFileでシンボルを解決することはできません"ライブラリの依存関係がありません

Answer 1

SparkContextを初期化していません。

val sparkConf = new SparkConf() 
val sc = new SparkContext(sparkConf) 

val dataRDD = sc.textFile("/Users/itru/Desktop/XXXX.bz2").cache()