AWSの糸クラスターモードでスパーク実行ステータスを確認するには

Question

私はAWSの糸クラスターモードでスパークアプリケーションを実行しています。

私は、Webから実行中の状態を取得することはできません見ての通り。

コンソールからは、それが生きていることだけを示す16/05/26 10:12:01 INFO yarn.Client: Application report for application_1464256533172_0002 (state: RUNNING)が表示されます。ここ+++

は、同じ条件の下で糸クライアントモードでのスナップショットです。

これは問題ありません。少なくともプログレスバーが表示されています。しかし、実行の終了後であっても、それは決して再び変更されず、0/368のタスクを表示します。 、私は糸クラスタモードで更新可能なステータスを表示するために、どのように...示すことができますが、更新されることはありませんステータスのみを実行している糸クライアントモードで を伝えることができ、今で

....

Answer 1

私はエグゼキュータで実行中のジョブは表示されません。あなたのスパーク・ジョブでRDDに何らかのアクションを実行したかどうかを確認するには、コードをチェックしてください。