ミニAhrefsを作成したいと思います。ドメインの権限、ページランク、バックリンク数などの基本的な情報を、必要なリンクに追加できます。自動リンクでリンクのバックリンク情報を取得するにはどうすればよいですか?
理想的には、Google検索APIにpingしてその情報を取得するのが最も簡単な方法だと思います。しかし、Google Web Search APIは推奨されておらず、Custom Searchは1つのサイト内または少数のサイト内での検索を可能にすることに重点を置いているようです。プラス1日あたりの100のクエリのレート制限は、ちょっとばかげています。
私が望むデータにアクセスするにはどうすればいいですか?
興味深い.... Ahrefはどのようにインデックスを作成していますか? GoogleのようにWebを手動でクロールしますか? – marcamillion
Moz、Ahrefs、Majesticは、Googleと同様の動作を使用して広範なWebクロールを行う少数の企業にすぎません。 Googleのデータベースと比較してデータベースのサイズと品質はさまざまで、できるだけ近くに構築しようとしています(ヒント:サイズだけでなく、あなたの思うよりも小さいです)。これらの見積もりを実行するために、彼らはバックリンクの膨大なインデックスを構築します。巨大なデータベースを構築することなくこれを行う手数料をかける方法はありません。 –