仮想マシンVM(RHEL 6.5,8GB RAM、100GB HDD)の擬似分散クラスタでMRジョブを実行しようとしていますが、 。Hadoop YARNジョブが送信後に固まってステータスが未定義のまま残っています
INFO:mapreduce.Job:実行中のジョブ:job_1437483993_001
アプリケーションのトラッキングURL(http://localhost:8088/cluster/applicationID)は、このような結果を示しています
ユーザー:ルート
名: grep-search
アプリケーションタイプ:mapreduce
ステータス:受理
FinalStatus:不定
私がしようとしているもの:
- 修正糸-site.xmlのとメモリの最小値と最大値の割り当てのためのmapred-site.xmlにチュートリアル(http://hortonworks.com/blog/how-to-plan-and-configure-yarn-in-hdp-2-0/)の後に
- が新しいジョブを収容するのに十分な空き領域を確保しています。
jps
は、すべてのサービスが正しく動作していることを示しています。
運がない。私を案内してください。
編集:
[[email protected] ~]# hadoop jar /usr/lib/hadoop-mapreduce/hadoop-mapreduce-examples.jar grep /user/pradeep output23 'dfs[a-z.]+' SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder". SLF4J: Defaulting to no-operation (NOP) logger implementation SLF4J: See http://www.slf4j.org/codes.html#StaticLoggerBinder for further details. 16/04/27 10:21:09 INFO client.RMProxy: Connecting to ResourceManager at /127.0.0.1:8032 16/04/27 10:21:09 WARN mapreduce.JobResourceUploader: No job jar file set. User classes may not be found. See Job or Job#setJar(String). 16/04/27 10:21:09 INFO input.FileInputFormat: Total input paths to process : 4 16/04/27 10:21:10 INFO mapreduce.JobSubmitter: number of splits:4 16/04/27 10:21:11 INFO mapreduce.JobSubmitter: Submitting tokens for job: job_1461732411884_0001 16/04/27 10:21:11 INFO mapred.YARNRunner: Job jar is not present. Not adding any jar to the list of resources. 16/04/27 10:21:11 INFO impl.YarnClientImpl: Submitted application application_1461732411884_0001 16/04/27 10:21:11 INFO mapreduce.Job: The url to track the job: http://localhost:8088/proxy/application_1461732411884_0001/ 16/04/27 10:21:11 INFO mapreduce.Job: Running job: job_1461732411884_0001
インフラストラクチャをテストするための単純な既存のサンプルアプリケーションを実行しようとしています 'hadoop jar hadoop-examples.jar grep入力出力 'dfs [az。] +'' –
あなたの提案に従ってください。 PIGスクリプトによって生成されたコード。まだresorcemanagerに提出した後、仕事はフリーズします。 –