2016-08-20 6 views
1
scala> val manager=sc.textFile("hdfs://localhost:54310/user/training/employee_dir/employeeManager") 
scala> manager.first 

ERRORアクションの呼び出し中:エラー(HDFS上のファイルの)SPARK RDDを作成し、

java.io.EOFException: 
End of File Exception between local host is: 
"localhost.localdomain/127.0.0.1"; 
destination host is: "localhost":54310; :  
java.io.EOFException; For   more details 
see:http://wiki.apache.org/hadoop/EOFException 

iは任意のプロパティspark-home/confを設定する必要がありますか?

答えて

0

この問題は、Javaを含むサービスが実行されていない場合に発生する可能性があります。すべてのサービスが動作していることを確認してください。さらに、ファイアウォールのアクセス許可を確認してください。もう1つの理由は次のようなものです。

hostname for hadoop as "xxx" not as "localhost"; you may want to check if the ip address in "/etc/hosts" for both "xxx" and "localhost" are correctly set.

ファイルのバックアップをとり、危険性をチェックしてください。

関連する問題