2016-08-30 23 views
0

私は、Scala 2.11のソースからDatastax Spark-Cassandra Connector 2.0を構築しようとしています。 Spark 2.0での使用を計画しています。 (見つからなかった理由を何かエキゾチックな?)Datastax Spark Cassandra Connector 2.0をScala 2.11のソースから構築できないのはなぜですか?

sbt -Dscala-2.11=true package 

私は見られなかったいくつかのjarファイルに関連するエラーを取得しています:https://github.com/datastax/spark-cassandra-connector

このコマンドを使用する:このレポ(マスター)にクローニング

[エラー] 13が見つかりません[エラー]
/Users/dochnev/.m2/repository/com/googlecode/json-simple/json-simple/1.1/json-simple-1.1.jar [エラー]
/Users/dochnev/.m2/repositor y/com/typesafe/config/1.2.1/config-1.2.1.jar [エラー]
/Users/dochnev/.m2/repository/com/yammer/metrics/metrics-core/2.2.0/metrics -core-2.2.0.jar [エラー]
/Users/dochnev/.m2/repository/commons-net/commons-net/3.1/commons-net-3.1.jar [エラー]
/ユーザ/ dochnev/.m2/repository/junit/junit/4.8.1/junit-4.8.1.jar [エラー]
/Users/dochnev/.m2/repository/org/apache/curator/curator-client/2.4。 0 /キュレーター - クライアント - 2.4.0.jar [エラー]
/Users/dochnev/.m2/repository/org/apache/curator/curator-framework/2.4.0/curator-framework-2.4.0.jar [エラー]
/Users/dochnev/.m2/repository/org/apache/hadoop/hadoop-yarn-server-nodemanager/2.2.0/hadoop-yarn-server-nodemanager-2.2.0.jar [エラー]
/Users/dochnev/.m2/repository/org/apache/zookeeper/zookeeper/3.4.6/zookeeper-3.4.6.jar [エラー]
/Users/dochnev/.m2/repository/org/ codehaus/janino/commons-compiler/2.7.8/commons-compiler-2.7.8.jar [エラー]
/Users/dochnev/.m2/repository/org/hibernate/hibernate-validator/4.3.0.Final /hibernate-validator-4.3.0.Final.jar [エラー]
/Users/dochnev/.m2/repository/org/jboss/logging/jboss-logging/3.1.0.CR2/jboss-logging-3.1。 0 .CR2.jar [エラー]
/Users/dochnev/.m2/repository/org/yaml/snakeyaml/1.12/snakeyaml-1.12.jar

は、それはそれを修正し、スパーク・カサンドラを構築することは可能ですScala 2.11用のコネクタ2.0?

答えて

1

spark-cassandra-connectorを使用するのが唯一の目的なら、なぜソースからビルドすることに迷惑をかけていますか? Spark 2.0.0/Scala 2.11に--packages datastax:spark-cassandra-connector:2.0.0-M2-s_2.11を使用してビルドの問題について忘れてみませんか?

私はいくつかの瓶がなくなったためにしばらくの間私のために構築されなかったし、それはhttps://datastax-oss.atlassian.net/projects/SPARKC/summaryに報告し、Gitterで開発者に話しました。私の場合、解決策は、失敗した依存関係に関して~/.ivy2リポジトリをクリーンアップすることでした。そして、正常に機能しました(私は失敗した依存関係のディレクトリをリポジトリ全体でなく削除しました)。

Iコネクタを構築するために、次のコマンドを使用しています:私はそれをCAに2分かかり毎朝やってる

sbt -Dscala-2.11=true assembly 

+0

私は、この問題が修正されたことを希望するソースからビルドしようとしていました。https://datastax-oss.atlassian.net/browse/SPARKC-355 – user3791111

2

〜/ .m2/repository /が削除され、ビルドが正常に完了しました。

0

- パッケージdatastax:spark-cassandra-connector:2.0.0-M2-s_2.11は魅力的です。ただし、--packages datastax:spark-cassandra-connector:2.0.0-M3-s_2.11は解決できない例外をスローします。

関連する問題