0
以下の画像を見てください。これらの24個のタスクは同じジョブに属しています。 各タスクで処理するデータ量は基本的に同じで、gcに使用する時間は非常に短いです。なぜ私の質問はタスクの期間同じ仕事に属していますか？スパークストリーミングでは、同じジョブに属するタスクの期間がかなり異なるのはなぜですか？
A
答えて
0
あなたはスパークUIでの作業のためにイベントのタイムラインを試してみて、確認することができますように。低速タスクが遅い理由を確認してください。
シリアライズ/デシリアライズで時間がかかりますか？
スケジューラ遅延のためですか？
または実行者の計算時間？コードを見ずに
関連する問題
- 1. フォームアクション属性が同じコードで異なるのはなぜですか？
- 2. Parallel.Invoke対タスクなぜexceution時間が異なるのですか？
- 3. URLは同じですがコンテンツが異なるのはなぜですか？
- 4. 行間隔が同じでないのはなぜですか？
- 5. なぜSQL Serverでは出力が異なり、Oracleでは同じですか？
- 6. 異なるヘッダーの名前が同じであるのはなぜですか？
- 7. couchdbの同じクエリで異なる時間がかかるのはなぜですか？
- 8. 同じ幅と高さでも、異なる要素が異なるサイズになるのはなぜですか？
- 9. （同じような）コードの出力が異なるのはなぜですか？
- 10. なぜDBpediaの同じ属性の2つの異なる語彙ですか？
- 11. 幅が同じでもラベルが異なるのはなぜですか？
- 12. pythonとウェブブラウザで同じリンクのコードが異なるのはなぜですか？
- 13. 同じファイル、同じファイルサイズだが2つの異なるメモリサイズ、なぜですか？
- 14. Interface BuilderとPhotoshopで同じRGB値が異なるのはなぜですか？
- 15. 異なるディレクトリにある同じファイルをコンパイルすると、結果が異なるのはなぜですか？
- 16. GUIで非同期タスクがAIアニメーションをフリーズするのはなぜですか？
- 17. 初期ウェイトが同じでも毎回異なるニューラルネットワークトレーニング結果が得られるのはなぜですか？
- 18. rownamesを同じものに変更すると、同じデータフレームが異なるのはなぜですか？
- 19. 同じプログラム、同じJVMですが、異なるマシン上でのメモリ要件と実行時間が大きく異なります - なぜですか？
- 20. 同じ式が異なるbig-O値を返すのはなぜですか？
- 21. 同じRegExpの動作が異なるのはなぜですか？
- 22. 同じデータを持つリストのサイズが異なるのはなぜですか？
- 23. 同じサイズのクラスの異なるデバイスで制約が異なるのはなぜですか？
- 24. スパークストリーミングで2コアと4コアと異なるパーティションで処理時間が同じであるのはなぜですか？
- 25. SQL - 同じフルテキスト検索が異なるサーバーで異なる結果を返すのはなぜですか？
- 26. 実行時間の異なるほぼ同じコード - なぜですか？
- 27. 同じAPI内の異なるエンドポイントが異なる日付形式を返すのはなぜですか？
- 28. 同じ変数が異なる実行で異なる仮想アドレスを持つのはなぜですか？
- 29. Transition.captureStartValuesとTransition.captureEndValuesの属性が同じであるのはなぜですか？
- 30. 同じライン印刷の間に遅延がないのはなぜですか？
は言うことはできないし、次にpicture.Orにおけるネットワークやディスクアクセスが 'のThread.sleep（にRandom.nextInt（72000））'仕事を持っている可能性があります私が知っているすべてのために。 – maasg