擬似分散モードでインストールされたHadoopでNutchを実行する方法

Question

私はNutch 1.13を自分のUbuntuにインストールしました。私はスタンドアロンモードでクロールを実行できます。それは正常に実行され、希望の結果を生成するが、私は今どのようにhadoopでそれを実行するか分からない？私はHadoopを擬似分散モードでインストールし、HadoopでNutchのクロールを行い、それを監視したいと考えています。どうしたらいいですか？スタンドアロンモードで実行するためのチュートリアルがたくさんありますが、どのようにしてHadoopで動作させることができるかについての明確な指示は見つかりませんでした。ただし、antでビルドした後は "Nutch Job"を使用する必要があります。

ありがとうございました。

Answer 1

ソースからNutchを構築したことを確認してください。つまり、ローカルモードでのみ動作するバイナリリリースは使用しないでください。あなたは

アリクリーンなランタイムを使用してコンパイルしたら

は、/ binにを展開/ ランタイムに行くと、いつものようにスクリプトを実行します。

NB再コンパイルする前にconfファイルを変更する必要があります。