2016-04-04 19 views
0

AWS Hadoopクラスタを初めて使用しています。AWS EMR HadoopクラスタでApache Pig出力なし

ブタ0.14.0のEMRでHadoopクラスタを導入しました。

標準出力(System.out.println())に出力されるUDFが呼び出されました。

ただし、パイプラインが正常に終了すると、私のUDFからの出力はありません。

私もstderrfile streamを試しました。

まだ出力されていません。

誰かに同じ問題が発生しましたか?

これに対処するにはどうすればよいですか?

答えて

0

UDFはクラスタの個々のノードで実行され、UDF System.outの呼び出しはノードのstdoutログに表示されます。彼らはあなたに豚のログを印刷しません。

これらのログにアクセスするには、AWS EMR Consoleで簡単に見つけることができるResource Managerを使用します。どのようにアクセスを有効にするかの指示があります。

関連する問題