スクラップしてインデックスを作成する法的スクリプト？

Question

データと価格を収集し、そのデータを自分のサイトの検索結果として提供するために、特定のウェブサイト（私が指定）を傷つけるウェブサイトを作成したいと考えています。基本的には検索エンジンのようですが、特定のサイトでは特定の方法で索引付けされます。私はこれを自分で書くことができますが、知りたいのですが：

1. それは法的ですか？たとえば、eBayのすべてのアイテムを手に入れて検索エンジンに入れ、ユーザーが自分のサイトを使ってeBayを検索できるようにすることはできますか？
2. 私がこれでお金を稼ぐとどうなりますか？
3. 既にこれを行う一般的なPHPスクリプトはありますか？

法的側面がカバーされています。私はこれを回避する方法を見つけました。（コンテンツを作成する人の許可を得ました）...唯一の真の問題は、コンテンツをクロールするために何が使えるのですか？特に、各サイトには異なる規則があります。私はセットアップする必要がありますか？同じコンテンツを2回スパイダリングしないようにするには、賢明でなければなりませんか？

Answer 1

それは法的ですか？

はい。そして、いいえ。多分。

惑星全体をカバーする法律は1つではありません。法律上の助言は実際にはありません。あなたの管轄地域で弁護士を探す必要があります。

情報のみを使用している限り、おそらくほとんどの管轄区域で大丈夫でしょうと私は考えています。したがって、eBayロゴはありません。あなたに関連付けられた表現はありません。

しかし、私は弁護士（私は私の仕事の一環として、米国のサブ種と多くを扱うのに）、確かではないあなた弁護士、そしてこのアドバイスはないです（が法的なアドバイスではありません）されますあなたが支払ったすべてのセントの価値があります。それはゼロです！

これをお金にしたらどうなりますか？

あなたのために良い:-)メガバンクを作りましょう。しかし、上記の点を参照してください。

既にこれを行う一般的なPHPスクリプトはありますか？

これは私が答えることができないビットです。私のPHPの経験は、ゼロから何もないところです。

Answer 2

この地域では合法性は少し日除けです。 robots.txt（http://www.robotstxt.org/robotstxt.html）ファイルの存在を調べて、WebサイトがWebスパイダーを歓迎するかどうかを判断する必要があります。

また、sphider（http://www.sphider.eu/）と呼ばれる非常に優れたPHP検索スクリプトがあります。

EDIT：

私は多くのウェブサイトは、あなたが彼らのウェブサイトのスニペットを取った後、コンテンツがどこから来たのウェブページにユーザーをリンクに問題を抱えて見ることができません。しかし、利益を上げるために、すべてのコンテンツを自分のウェブサイトに表示するだけであれば、多くのウェブサイトがコンテンツを利益を得るべきであるように問題を抱えていると推測できます。

Answer 3

1）合法ですか？たとえば、eBayのすべてのアイテムを手に入れて検索エンジンに入れ、ユーザーが自分のサイトを使ってeBayを検索できるようにすることはできますか？

これは技術的に実現可能です。これを非常に簡単に行うPHPスクリプトを構築することができます。しかし、私はあなたが知的財産を使用している誰かのelsesのサイトからコンテンツを掻き集めることによって、彼らのデータを許可なく使用するので、違法な境界線だと言います。

2）私はこれでお金を稼ぐとどうなりますか？

その後、データの元の所有者があなたの後に来る可能性が非常に高く、停止と告知通知を出してからあなたを訴えます。 eBayほどの大きさの組織では、これを瞬きせずに行うことができます。

3）既にこれを行う一般的なPHPスクリプトはありますか？

ご質問の法的性質が疑問であるため、私はすでにこれを行うスクリプトは存在しないと確信しています。

---

ebayやその他の大規模データプロバイダからデータを取得する正しい方法は、APIまたはアプリケーションプログラミングインターフェイスを使用することです。これらは、プログラムが互いに通信するために設計された特別なプロトコル、言語です。これには、ページ・スクレイピングよりも大幅に効率的であるという利点がありますが、プロバイダからデータを取得するための正式な方法でもあります。

ebay固有のAPIの詳細については、こちらをご覧ください。 http://developer.ebay.com/common/api/