2016-09-12 9 views
2

NutchとElasticsearchのバージョンが連携して、AWS上で垂直検索アプリケーションを作成する方法を知りたいですか?NutchとElasticsearchの統合

私が500のサイトを開始してクロールを開始し、そこから増加する予定の場合は、一緒に使うのに最適なバージョンは何ですか?

私はNutch 1.10とES 1.5をデベロッパーとテストの目的で一緒に使用していますが、私のデータが大きくなるにつれて、より多くのサイトがクロールされるため、これは実現できません。

私はAWS EMRを使用してS3にクロールされたデータを保存したいと考えています。

答えて

1

多くの検索、読んだり、いくつかのビデオを見て、... Nutch 2.x(2.3)が良い選択であることは明らかです。これは今後の方が適していると思われ、ESで動作します。

-THTH類似の状況に遭遇している他の人

関連する問題