私は開発段階でJavaアプリケーションを持っています。また、2つのプロセッサコアを搭載したマシンを1つしか含まないクラスタスタンドアロンモードのリモートスパーククラスタもあります。 「クラスター」には、マスターと1人のワーカーが含まれます。アプリケーションは長時間実行されているジョブを送信し、ジョブはCPU作業を必要とせず、リモートサービスへの多くの呼び出しを行います。つまり、私はsparkのようなタスクスケジューラを使用します。 テスト中に、アプリケーションは同じ時間に5つのタスクを送信しますが、2つは並行して動作し、別の3つはキューに入ります。 2つの物理コアを持つ1つのインスタンスで、この構成で並列タスクの数を増やすことは可能ですか?スタンドアロンモードで並列タスク数を増やす
0
A
答えて
0
並列タスクの数を増やすには、物理コアを増やす必要があります。あなたは2コアを持っているので、2つのタスクは並行して動作し、他の3つは待ち行列に入っています。
+0
ハイパースレッドが有効になっている場合はどうなりますか? – kaza
関連する問題
- 1. スパーク:タスク/パーティションの数を増やす
- 2. MapReduce:並行マッパータスクの数を増やす
- 3. 並列タスク
- 4. 並行タスク数
- 5. csvファイルで増加する数値で列の値を増やす方法
- 6. Quartz.net +タスク並列ライブラリ
- 7. 整数変数でTextViewを増やす
- 8. クリック数で週数を増やす
- 9. 産卵複数の並列タスク
- 10. Azureバッチで「ノードあたりの最大タスク数」を増やす方法は?
- 11. 変数を増やす
- 12. 変数を増やすCSS
- 13. タスクを並列で実行する - Silverlight
- 14. PPLで可変数タスクを使ってタスクを並列化する方法
- 15. Cで固定数で列挙型の値を増やす
- 16. CSSで数字でパッドを増やす
- 17. タスク並列ライブラリ - LongRunningタスクと複数の継続との比較
- 18. 基数システムのように、Pythonで配列を増やす
- 19. PHPで英数字の文字列を増やす方法は?
- 20. アニメートでインクリメントの数を増やす
- 21. C#で10進数を増やす
- 22. ホバーでボタンの幅を数%増やす
- 23. マルチスレッドで変数の値を増やす
- 24. ビジュアルベーシックで変数名を増やす
- 25. Cで並列タスクを実行
- 26. タスク並列ライブラリ - ブロック操作?
- 27. Activiti並列サービスのタスク
- 28. タスク並列ライブラリと例外
- 29. Node.js Napajsの並列タスク
- 30. コンソールを使ってマルチスレッドや並列タスクを処理する方法
'spark.executor.cores'をより高い値に設定しようとしましたか? – Dikei
@Dikeiこのプロパティをアプリケーション側のJavaSparkContextに渡すことを意味しますか?もし私がそれを行うと、エラーなしでジョブを送信することはできません – Nawa