sc.textFileスカラーエラー

Question

ファイルを書き込んだパスからファイルを読み込もうとしています。私は、私は次のコード行を使用していますマニュアルを参照して、次のい： が見つかりません：値SC

val data = sc.textFile(PATH) 

このコンパイルエラーを与えます。

私は、ターミナルで与えられるべきコマンドを含む解決策を見つけましたが、私の場合、私はeclipseを使用しています。ライブラリなどをインポートしてこの問題を解決する方法はありますか？

ありがとうございました！

Answer 1

最初にスパークコンテキストを作成する必要があります。例えば

：

val conf = new SparkConf().setAppName(appName).setMaster(master) 
val sc = new SparkContext(conf) 

それはすでにSCという変数に、あなたのために作成されるので、あなたは、スパークコンテキストを作成する必要はありませんスパークシェルを使用しています。

スパークコンテキストの初期化thereについて詳しく読むことができます。