0
以下の画像を見てください。これらの24個のタスクは同じジョブに属しています。 各タスクで処理するデータ量は基本的に同じで、gcに使用する時間は非常に短いです。なぜ私の質問はタスクの期間同じ仕事に属していますか？スパークストリーミングでは、同じジョブに属するタスクの期間がかなり異なるのはなぜですか？
A
答えて
0
あなたはスパークUIでの作業のためにイベントのタイムラインを試してみて、確認することができますように。低速タスクが遅い理由を確認してください。
シリアライズ/デシリアライズで時間がかかりますか？
スケジューラ遅延のためですか？
または実行者の計算時間？コードを見ずに
関連する問題
- 1. Parallel.Invoke対タスクなぜexceution時間が異なるのですか？
- 2. URLは同じですがコンテンツが異なるのはなぜですか？
- 3. なぜSQL Serverでは出力が異なり、Oracleでは同じですか？
- 4. 異なるヘッダーの名前が同じであるのはなぜですか？
- 5. couchdbの同じクエリで異なる時間がかかるのはなぜですか？
- 6. 同じ幅と高さでも、異なる要素が異なるサイズになるのはなぜですか？
- 7. なぜDBpediaの同じ属性の2つの異なる語彙ですか？
- 8. （同じような）コードの出力が異なるのはなぜですか？
- 9. 幅が同じでもラベルが異なるのはなぜですか？
- 10. pythonとウェブブラウザで同じリンクのコードが異なるのはなぜですか？
- 11. 同じファイル、同じファイルサイズだが2つの異なるメモリサイズ、なぜですか？
- 12. Interface BuilderとPhotoshopで同じRGB値が異なるのはなぜですか？
- 13. 初期ウェイトが同じでも毎回異なるニューラルネットワークトレーニング結果が得られるのはなぜですか？
- 14. rownamesを同じものに変更すると、同じデータフレームが異なるのはなぜですか？
- 15. 同じプログラム、同じJVMですが、異なるマシン上でのメモリ要件と実行時間が大きく異なります - なぜですか？
- 16. GUIで非同期タスクがAIアニメーションをフリーズするのはなぜですか？
- 17. スパークストリーミングで2コアと4コアと異なるパーティションで処理時間が同じであるのはなぜですか？
- 18. 同じRegExpの動作が異なるのはなぜですか？
- 19. 同じサイズのクラスの異なるデバイスで制約が異なるのはなぜですか？
- 20. 実行時間の異なるほぼ同じコード - なぜですか？
- 21. 同じAPI内の異なるエンドポイントが異なる日付形式を返すのはなぜですか？
- 22. 同じ変数が異なる実行で異なる仮想アドレスを持つのはなぜですか？
- 23. Transition.captureStartValuesとTransition.captureEndValuesの属性が同じであるのはなぜですか？
- 24. 同じライン印刷の間に遅延がないのはなぜですか？
- 25. シンプルなクロージャー：なぜ異なる表現の出力が同じですか？
- 26. 2つのmysqlファイル（同じテーブル、同じ内容）のサイズが異なるのはなぜですか？
- 27. なぜ同じ結果が異なるのですか？ PHP EがC＃の
- 28. ファイルの種類が異なる同じコンテンツの出力が異なるのはなぜですか？以下同じ内容については
- 29. 同じASP.NET仮想ディレクトリ、異なる動作、なぜですか？
- 30. 繰り返しジョブでHangFireの同じ名前が機能しないのはなぜですか？
は言うことはできないし、次にpicture.Orにおけるネットワークやディスクアクセスが 'のThread.sleep（にRandom.nextInt（72000））'仕事を持っている可能性があります私が知っているすべてのために。 – maasg