同じクラスタ上でスパークするために複数のアプリケーションが送信された場合、sparkはファーストインファーストアウトファッションでそれらを注文し、前回の終了までジョブを開始できません。アプリケーションをキューをスキップさせ、スケジューラーで実行する次のアプリケーションにする方法を見つけようとしています。これを行う方法はありますか?私はドキュメントやユーザーインターフェイスから何も見つけることができません。スパークスケジューラ実行するアプリケーションを強制的に実行
0
A
答えて
0
最初のアプリケーション/ジョブの後に開始された場合、個々のアプリケーションまたはジョブを強制的に別のアプリケーションまたはジョブに先行させることはできません。
ただし、キューでエグゼキュータのためにキューが競合しないように、キューを適切に設定する必要があります。この場合、キューの1つにsparkの全エグゼキュータの最大100%を使用する能力がありました。そのキューでは、アプリケーション/ジョブのバグのために、スパークジョブがキューに入れられて処理されませんでした。実行されたキューはエグゼキュータの100%までのアクセス権を持っていたため、その後の各ジョブはキューに関係なく実行を完了するまで待たなければならず、クラスタ全体がバックログになりました。
関連する問題
- 1. スレッドコンテキストスイッチを強制的に実行する
- 2. QDockWidgetを強制的に実行する
- 3. テストを実行するためにsbt 0.11を強制的に実行する
- 4. SignalR特定のグループに属するアプリケーションを強制的に実行する
- 5. JavaScriptを強制的に実行するEventListenerを強制しますか?
- 6. QTP Web Extensibilty - QTPにテスト実行を強制的に強制する方法
- 7. シングルスレッド実行を強制するには?
- 8. Gradle:強制的にカスタムタスクを常に実行する(キャッシュなし)
- 9. VS2008 C++ポストビルドイベントを強制的に実行するには?
- 10. SQLクエリを実行するとアプリケーションが強制終了する
- 11. O(1)を強制的に実行する
- 12. iPad上でiPhone版を強制的に実行する
- 13. メインスレッドでコードを強制的に実行する
- 14. HTaccess経由でSSLを強制的に実行する
- 15. 内部でイベントを強制的に実行する
- 16. iOSのメモリ不足を強制的に実行する
- 17. フルスクリーンモードで強制的にWebページを実行する
- 18. PySideで強制的にQTimer()タイムアウトを実行する
- 19. 特定のノードでOozieジョブを強制的に実行する
- 20. MySQLでイベントを強制的に実行する方法
- 21. .NETでOutOfMemoryExceptionを強制的に実行する方法
- 22. 安全プレイブックの実行を強制的に強制終了できますか?
- 23. 続行する前にレルム通知ブロックを強制的に実行する
- 24. イベント中に強制的に実行するメソッド
- 25. このアプリケーションを実行すると強制終了します
- 26. 強制的にSQLite 3.7をレガシーモードで実行しますか?
- 27. アクションリスナーを強制的に実行しますか?
- 28. VS2010 C++並行実行時 - シングルスレッドモードを強制するには?
- 29. CUSTOM DDL DMLを実行する方法実行時にSpringブート時にHibernateを強制実行せずに
- 30. ブロッキングメソッドの実行中に強制的に制御を戻します。