spark ClassNotFoundException kmeansを実行中にエラーが発生しました

Question

spark KMeansを使用するためのスパークジョブを送信しようとしています。私はscalaファイルを正しくパッケージ化していますが、ジョブをサブミットしたいときは常にClassNotFoundExceptionがあります。

名： はここに私のsbtフィーユある= "sparkKmeans" + = "org.apache.spark"

libraryDependencies %% "スパーク・コア" ％ここで "1.1.1"

と私のscalaクラス：

sparkがシリアライザに問題があると言われていたので、私は最後の2行をコメントしました。しかし、まだ問題があります。

java.lang.ClassNotFoundException: sparkKmeans 
    at java.net.URLClassLoader$1.run(URLClassLoader.java:366) 
at java.net.URLClassLoader$1.run(URLClassLoader.java:355) 
at java.security.AccessController.doPrivileged(Native Method) 
at java.net.URLClassLoader.findClass(URLClassLoader.java:354) 
at java.lang.ClassLoader.loadClass(ClassLoader.java:425) 
at java.lang.ClassLoader.loadClass(ClassLoader.java:358) 
at java.lang.Class.forName0(Native Method) 
at java.lang.Class.forName(Class.java:278) 
at org.apache.spark.util.Utils$.classForName(Utils.scala:174) 
at org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:689) 
at org.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:181) 
at org.apache.spark.deploy.SparkSubmit$.submit(SparkSubmit.scala:206) 
at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:121) 
at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala) 

と使用してジョブをサブミット：：誰も私を助けることができれば

./bin/spark-shell --class sparkKmeans ...... 

私は理解されるであろう、ここで

と

はエラーです。

Answer 1

コメントありがとうございます。私が行っている あなたは言った： Built.sbtファイル： 名：=「sparkKmeans」

libraryDependencies ++= Seq(
"org.apache.spark" %% "spark-core" % "1.6.1", 
"org.apache.spark" % "spark-mllib_2.10" % "1.6.1" 
) 

（私はスカラ座2.11.8使用および1.6.1バージョンが、それでも同じエラースパーク またについて他の質問： 私が使用して自分のアプリケーションパッケージ化しています： SBT をコンパイル パッケージ

および実行するための使用：

./bin/spark-submit --class sparkKmeans k/kmeans/target/scala-2.10/sparkkmeans_2.10-0.1-SNAPSHOT.jar '/home/meysam/spark-1.6.1/kmeans/pima.csv' 3