GoogleがUserDir URLをクロールするのを防ぐにはどうすればよいですか（実際のドメインではありません）？

Question

実際のドメインがライブになる前に、UserDir URLでサイトを構築しているクライアントがあります。 UserDirのURLの形式は、常に次のとおりです。

http://1.2.3.4/~johndoe

時々、GoogleはこれらのUserDirのURLをクロールし、一時的なサイトは、一度、サイトがそうhttp://johndoe.com

でライブになった後でも結果に表示されますクライアントはhttp://johndoe.com、に住んでいます。GoogleがUserDirアドレスをクロールできないようにするにはどうすればよいですか？

（もちろん、私はSEOは、お客様にとって重要であるため、Googleは本当のドメインをクロールする必要があります）

Answer 1

私は、この目的のために正規のタグを使用します。あなたは、このようなようなindex.htmlファイルに正規のタグを置く場合：

<link rel="canonical" href="http://johndoe.com/" /> 

Googlebotがhttp://1.2.3.4/~johndoeでそれを見つけたときにその後それはhttp://johndoe.com/の重複とGoogleはインデックス正しいものであることを知っているだろう。 Googlebotは、実際のサイトをクロールして自己参照カノニカルに問題がない場合、同じタグを表示します。