hadoopクラスタをclodera 4 b1にアップグレードした後、無効な "mapreduce.jobtracker.address"コンフィグレーションエラーが発生しました

Question

最近、clodera4b1にアップグレードしました。アップグレード前にmapreduceジョブはうまく動作していましたが、mapreduceプログラムを実行すると、

コマンドの実行：

hadoop jar /usr/lib/hadoop/hadoop-mapreduce-examples-0.23.0-cdh4b1.jar grep *.xml /user/out/ 'dfs' 


12/04/10 19:23:15 INFO mapreduce.Cluster: Failed to use org.apache.hadoop.mapred.LocalClientProtocolProvider due to error: Invalid "mapreduce.jobtracker.address" configuration value for LocalJobRunner : "dev-xxx:yyyy" 
12/04/10 19:23:15 ERROR security.UserGroupInformation: PriviledgedActionException as:anchauhan (auth:SIMPLE) cause:java.io.IOException: Cannot initialize Cluster. Please check your configuration for mapreduce.framework.name and the correspond server addresses. 
Exception in thread "main" java.io.IOException: Cannot initialize Cluster. Please check your configuration for mapreduce.framework.name and the correspond server addresses. 
    at org.apache.hadoop.mapreduce.Cluster.initialize(Cluster.java:123) 
    at org.apache.hadoop.mapreduce.Cluster.<init>(Cluster.java:85) 
    at org.apache.hadoop.mapreduce.Cluster.<init>(Cluster.java:78) 
    at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1185) 
    at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1181) 
    at java.security.AccessController.doPrivileged(Native Method) 
    at javax.security.auth.Subject.doAs(Subject.java:396) 
    at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1167) 
    at org.apache.hadoop.mapreduce.Job.connect(Job.java:1180) 
    at org.apache.hadoop.mapreduce.Job.submit(Job.java:1209) 
    at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:1233) 
    at com.nextag.mapred.MerchantImport.doTask(MerchantImport.java:221) 
    at com.nextag.mapred.Main.main(Main.java:9) 
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) 
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39) 
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25) 
    at java.lang.reflect.Method.invoke(Method.java:597) 
    at org.apache.hadoop.util.RunJar.main(RunJar.java:200) 

そして、私のカスタムmapredの仕事のために、jarファイルをコンパイルしている間、私は新しいものにライブラリファイルを変更しましたが、何の成功

Answer 1

我々は同じ例外と理由がありませんでしたそれは私たちはpomファイルに間違った依存関係を持っていました。私たちはhadoop-clientバージョン2.0.0-cdh4.0.0を指していましたが、これは糸用ですが、MRv1を使用しているので、2.0.0-mr1-cdh4.0.0を指していたはずです。依存関係に糸ジャーファイルは存在してはいけません。

Reference。

よろしく、

ピエール・リュック・ベルトラン