sparkジョブでthread.sleepを呼び出すのに問題がありますか？

Question

私のスパークジョブがSparkドライバでthread.sleepを呼び出している場合は、これに問題はありますか、それとも完璧ですか？

Answer 1

それはあなたがそれをどこに呼んでいるかによって異なります。 ドライバで呼び出す場合は、他のプログラムと同じように動作します（エグゼキュータのタイムアウトが発生するアクションによっては問題が発生する可能性があります）。

ワーカーでそれを呼び出す場合、ワーカーはハートビートを与えなかったため、おそらくリソースマネージャーによって殺されます。

Answer 2

Thread.Sleep()に電話する特別な理由がある場合、またはその可能性があるかどうかを知りたい場合は、 はいそれはThread.Sleep()に電話することが可能ですが、なぜそうしたいのかというシナリオに依存します。これらのことを行うことができる記事はほとんどありません。 ThreadSleepexample。通常、SparkのThread.sleep()はCPUオーバーヘッドを増加させます。