Spark Streamingアプリケーションのエグゼキュータの数を設定する

Question

Spark StreamingアプリケーションをYarnクラスタモードで実行しています。エグゼキュータの数を1つのノードに制限したいのですか？どのようにスパークでこれを行うには？

Answer 1

次の2つの方法でエグゼキュータの数を制御することができますコマンドを送信スパークとコンファレンスフラグインサイド

spark-submit -class ClassName --num-executors 1 .... other parameters 

Option 2:：スパークコマンドを送信すると直接

Option 1:

spark-submit --class ClassName --conf "spark.executor.instances=1" .... other parameters. 

を

あなたはm同じ詳細情報については、Submitting Applicationsから。