私のhadoopクラスタはネットワークの条件のためうまく動作しません。私はネットワーク全体を変更すると、別のルータのように、こうしてIPアドレスを変更しますか?いくつかの構成を更新してもクラスタはまだ機能しますか?または私はそれを分解し、すべてを再構築する必要がありますか? ありがとうございます。hadoopのノードがIPアドレスを変更するとどうなりますか?
答えて
IPアドレスを設定に変更すると動作します。なぜDNSを使用しませんでしたか?
[OK]を、それは良い答えではなかった、私は謝罪し、より良い答えを与えることができます。 実行中のクラスタで構成を変更する必要がある場合は、データノードを廃止してコミッションすることができます。
データノードをオフにすることはお勧めできません。
データノードDecomissioning
拳のステップは、あなたがノードマネージャに同じことを言わなければならない、あなたには、いくつかのノードを削除しようとしている糸に伝えています。
お使いのシステムは廃止のために設定されている場合、それはあなたがhdfs-site.xml
HDFS-site.xmlの
<property>
<name>dfs.hosts.exclude</name>
<value>$YOUR_PATH/dfs.exclude</value>
<final>true</final>
</property>
yarn-にyarn-site.xml
とdfs.hosts.exclude
にキーyarn.resourcemanager.nodes.exclude-path
を持っている場合、私は、知りませんsite.xml
<property>
<name>dfs.hosts.exclude</name>
<value>$YOUR_PATH/dfs.exclude</value>
<final>true</final>
</property>
ファイル$YOUR_PATH/dfs.exclude
を開き、ホスト名/ IPアドレスを追加します。o fノードを停止する必要があります。
データノードは、Webインターフェイスをチェックする運用停止中である場合
yarn rmadmin -refreshNodes
hdfs dfsadmin -refreshNodes
チェックを実行します。廃止措置
糸-site.xmlのと同じ方法で、
データノードComissioning
作品
<property>
<name>yarn.resourcemanager.nodes.include-path</name>
<value>$YOUR_PATH/dfs.include</value>
<final>true</final>
</property>
HDFS-site.xmlの
<property>
<name>dfs.hosts</name>
<value>$YOUR_PATH/dfs.include</value>
<final>true</final>
</property>
オープンファイル$YOUR_PATH/dfs.include
とdd追加するノードのホスト名/ IPアドレス。
yarn rmadmin -refreshNodes
hdfs dfsadmin -refreshNodes
今あなたが追加したホストがリストにある
hdfs dfsadmin -report
いくつかの時間を待ちます。
上記のキーが設定にない場合は、ノードマネージャと糸を追加した後で停止または再起動する必要があります。
これらの手順を使用すると、データノードを安全に停止できます。
- 1. ルビーのIPアドレスを変更する
- 2. デフォルトのAptana IPアドレスを変更する
- 3. レルムオブジェクトサーバのIPアドレスを変更する
- 4. Windows CEマシンのIPアドレスをプログラム的に変更しますか?私は、Windows CEマシンのIPアドレスを変更するにはどうすればよい
- 5. PowershellでIPアドレスを変更する
- 6. 変更IPアドレスのPythonセレン
- 7. AndroidのIPアドレス/ InetAddressを変更するコードはありますか?
- 8. IPアドレスがPythonで変更されるとどのように視覚化するのですか?
- 9. どのようにIPアドレスの変更を検出するには?
- 10. メインドメインに一致するサブドメインのIPアドレスを変更します。
- 11. ローカルマシンのIPアドレスをモバイルデバイスと一致するように変更する
- 12. IPアドレスを変更するための単純なpowershellリスト
- 13. Hadoopの特定のIPアドレスにマップタスクをスポーンする方法は?
- 14. サーバのIPアドレスはどのように知ることができますか?
- 15. IPアドレスを変更せずにNETSHを使用してサブネットマスクを変更する方法はありますか?
- 16. IPアドレス:ロータスノーツアプリケーションにリクエストとレスポンスのオブジェクトがありますか
- 17. IPアドレス変更後にFusionpbxのログインが失敗する
- 18. Gemfile.lockを直接変更するとどうなりますか?
- 19. InputLanguageを変更するとどうなりますか?
- 20. ノードjs異なるインターフェースまたはIPアドレスへのバインド要求
- 21. IPアドレスの変更がIIS上のclassic-aspサイトにどのように影響しますか?
- 22. ノードjsのIPアドレスからタイムゾーンを取得する
- 23. C++が有効なIPアドレスまたはIPを確認する
- 24. hadoopクラスタのノードのFQDNを変更する
- 25. IPアドレスがアドレス範囲内にあるかどうかを調べる
- 26. pingはどのようにIPアドレスを解決しますか?
- 27. Hadoopノードが廃止に時間がかかります
- 28. PHPを使ったApacheサーバのIPアドレスを変更する
- 29. Azure Windows VMのIPアドレスが変更されずに変更されました
かなりわかりませんが、詳しく説明しますか?ありがとうございます – Liaoxiaochen
クラスタ内のマシンのIPアドレスをすべて変更する必要がある場合は、変更する必要があります。説明するものはありません。 – ozw1z5rd
誠にありがとうございます!前にこのような詳細な答えを期待していなかった、それは間もなく将来間違いなく助けになるだろう。 – Liaoxiaochen