スパークシェル

Question

から倹約サーバーに接続できない私は、次のコマンドを使用してスパークシェル経由で倹約サーバーを刺激するために接続しようとしています：

val df = spark 
    .read 
    .option("url", "jdbc:hive2://localhost:10000") 
    .option("dbtable", "people") 
    .format("jdbc") 
    .load 

error: not found: value spark

理由何ができますか？

Answer 1

火花をシェルに入力すると、どのようなメッセージが表示されますか？有効なスパークセッションがあることを確認してください。

RES1：org.apache.spark.sql.SparkSession = org.apache.spark.sql.SparkSession@2bc0b8c8

は、あなたがして火花シェルでそれが表示されない場合は、表示されるはずです何でありますシェルを正しく起動しなかった可能性があります。