-1
私はoozieをインストールしていますが、私はoozieワークフローでspark jobを実行できますか？ oozieを直接使用することなく、oozieバンドル内のsparkライブラリから独立してsparkを実行できますか？どうしたらいいですか？例を挙げて説明してください。oozieを使用せずにsparkを単独で実行できますか？
A
答えて
3
spark-submitを使用して、spark-shellでジョブを送信することができます。下記のスパークの文書を確認してください。
関連する問題
- 1. oozieでsparkジョブを実行できません
- 2. OozieでSparkジョブを起動できません（エラーMetricsSystem）
- 3. Appcelerator Titanium Appsは単独で実行できますか？
- 4. Apacheのhadoopでoozie 4.3.0を実行できません2.7.3
- 5. HDP 2.5.0でOozieでSparkアクションを実行できない（java.lang.IllegalArgumentException：無効なContainerId）
- 6. OozieのSqoopジョブがHiveのインポートを実行できません
- 7. Jenkins UIを使用せずにjenkinsプラグインを実行できますか？
- 8. プロジェクトを単独でコーディングするときにテストを実行しますか？
- 9. レイアウトエディタをEclipseから抽出して単独で実行できますか？
- 10. jarファイルを使用してoozieでhadoopジョブを実行する
- 11. MySQLのSETは単独で使用できますか？
- 12. Kotlin/Nativeは単独で使用できますか？
- 13. MSBuildバイナリは単独で使用できますか？
- 14. HDInsightのoozieワークフローでU-SQLクエリを実行できます
- 15. VB.NETは単独でマルチスレッドを実行しますか？
- 16. OozieのPigアクション - ワークフローでpigパラメータファイルを使用できません
- 17. マウスを使用せずにNUnitテストを実行しますか？
- 18. Oozieを使用してYARNでSqoopジョブを実行
- 19. OozieとHueを使ってspark pythonジョブを実行する - Intercepting System.exit（1）
- 20. タイマーコンポーネントを使用せずにタイマーを使用できますか？
- 21. uiを使用せずにoauth2を使用できますか？
- 22. spark-1.6.1-bin-hadoop1でspark-terasortを実行することができません
- 23. Satchmo単体テストは単独で実行されます
- 24. Mavenを使用せずにTestNGでAllureのレポートを実装できますか？
- 25. SparkでDockerでCassandraを実行できません
- 26. pytestでスパークテスト - ローカルモードでSparkを実行できません
- 27. ブラウザコントロールを使用せずにAdobe FlexでJavaScriptを実行する
- 28. バニラJavaScript + ASP.Net CoreでAureliaのバインディングライブラリを単独で使用できますか？
- 29. クラスはメタマジックを使用してAttributeErrorを単独で処理できますか？
- 30. WindowsでApache Sparkを実行できません
私が火花をインストールしていないが、私はそのワークフローを使用してスパークジョブを実行することができますoozieをインストールしました。 oozieワークフローを使わずにsparkを実行したい。 –
そしてoozieのサブフォルダの中にspark-submitファイルが見つかりません。どうすればそれを実行することができますか？ –
@dark_shadow私が知る限り、Oozieはワークフロー自動化ツールです。スパーク・ジョブを単独で実行することはできません。 – alexgids