私は輝く水に新しいです。私は今、sparkling-shellからプログラムを実行する方法を学びます。しかし、私はsparkへの入力として与えることができるスタンドアロンのアプリケーションを構築する方法がわかりません。アプリケーションを構築するために必要なジャーは何ですか?最小限のスパークリングウォーターアプリケーションを構築する
答えて
チェックsparkling-water examplesProstateDemo.scalaに、スタンドアロンのスパークリングウォーターアプリを書く方法(h2oコンテキストの作成など)について説明します。
あなたは基本的にあなたのsbt/maven/gradle依存関係にneed to addsparkling-water-core
という文字をコンパイルします。 2つのオプションがあります:
光沢のあるコアが入ったアセンブリの瓶を作ります。ここで私はSBTのために使っている例です:
libraryDependencies += "ai.h2o" %% "sparkling-water-core" % "2.0.4" excludeAll( ExclusionRule(organization = "org.apache.spark"), ExclusionRule(organization = "org.slf4j"), ExclusionRule(organization = "com.google.guava"), ExclusionRule(organization = "org.eclipse.jetty.orbit"), ExclusionRule(organization = "com.esotericsoftware.kryo"))
あなたのjarファイルをコンパイルし、提出火花
FYI--jars
または--packages
引数を使用します。
spark-submit --packages ai.h2o:sparkling-water-core_2.11:2.0.4 your_jar.jar
ありがとうございました!それが動作すれば私はあなたに知らせます。 –
それは動作します!本当にありがとう。また、libraryDependencies + = "ai.h2o" %% "sparkling-water-repl"% "2.0.4"を追加してアプリを実行する必要がありました。 –
私のプロジェクトでreplを無効にしました.h2oConfの 'spark.ext.h2o.repl.enabled = false' – prudenko
:スパークリングウォーターもありますstb
を含む液滴定義:
https://github.com/h2oai/h2o-droplets/blob/master/sparkling-water-droplet/build.sbt
- 1. 最小限の機能でクロムを構築する方法
- 2. 最小/最大バイナリヒープを構築する
- 3. メモリフットプリントを最小限に抑える「疎」検索配列を構築する
- 4. MinGWでの最小DLLの構築?
- 5. javaのTreeMapを使用して最小スパニングツリーを構築する
- 6. O(n)時間の複雑さで最小最大ヒープを構築する
- 7. アンドロイドを構築するために必要な最小限のソースは何ですか?
- 8. 中小型javascriptプログラムを構築する
- 9. nixで構築されたドックラーコンテナのサイズを最小化
- 10. 最小限のイメージエディタコンポーネント
- 11. 最小限のグラフライブラリ
- 12. 構文エラー/ Pythonで最小限にする方法
- 13. 値を含む最小限のJSONデータ構造
- 14. Android:SearchViewのスペースを最小限にする
- 15. バックキープレスのアクティビティを最小限にする
- 16. Googleのフォントリクエストを最小限にする
- 17. 小さなデスクトップアプリケーション用のGUIの構築
- 18. C#文を最小限にする
- 19. JavaScriptを最小限にする
- 20. Eclipse RCPトレイアプリケーションを最小限にする
- 21. Outlookウィンドウを最小限にする
- 22. 最小限のカラムでフィルタリングする
- 23. CUDAの最小テクスチャサイズ制限
- 24. 最小限のサイズ変更
- 25. 最小限のc11ソースコード
- 26. 最小限のソケットhttpサーバ
- 27. SYMFONY2最小限の設定
- 28. 最小限のLinuxディストリビューション
- 29. DataGridView最小限の行数
- 30. 最小限のコマンドラインユーティリティ用package.json
Spark 2.0を使用した新しいスプラーク液滴がありますか –