RSSフィードのスクレイピングの防止？

Question

Wordpressサイトでは、Googleに検出させる通常のブログと、他のサイトへの発信リンクのRSSフィードの両方を持っています。私はこの他のRSSフィードでボットを取得する必要はありませんし、人々が自分の使用のためにリンクを得ることもできないようにしたいと思います。

メインブログのRSSを正常に無効にしましたが、この追加フィードのRSSリンクを暗号化/保護/非表示にする方法がわかりません。

私はFacebookがRSSなしでニュースフィードをどのように実行しているのかよく分かりませんが、それはおそらく自分の手段や経験を超えて複製することでしょう。

これらは単に発信リンクであるが、私はフィード内の著作権表示はあまり効果がないと思う。たぶん、RSS以外の方法で自動的にリンクを出力する方法がありますか？

Answer 1

これまでの基本的な答えはAPIを経由、JSONを出力するように、実際のRSSを使用するよりも、他の方法でフィードエントリを得るための方法を使用することです、など

それはかかわらないこする防ぐことができます完全に。

Answer 2

Robots.Text www.robotstxt.orgを使用すると、Googleがリンクをたどるのを防ぐことができます。すべての自己尊重ロボットは、robots.txtファイルの指示に従ってください。このファイルはあなたの座席の根元に入る必要があります。