1
コンテンツを提供するためにApache 2を使用しています.Bing BotはHTTP/0.9を使用して、直接IPホストには対応していないサーバーのページをリクエストしています。Apache 2を使用している場合、HTTP/0.9を使用してSpider/Web Crawlerを処理する方法はありますか?
私はスパイダーをどのホストにしたいのか分からないが、自分のサイトのインデックスを作成する必要がある場合はどうすればよいですか?
私は現在400 Bad Requestを返送していますが、私のサイトはBingやYahooのインデックスに登録されないと心配しています。
おかげ