Twitterのコーパスをダウンロード

Question

私はデータマイニングシステムに取り組んでおり、要件の1つはAPIを使用せずに分析を実行できることです。 Twitterデータベース（またはその大部分）をダウンロードしてローカルで使用する方法はありますか？

Answer 1

APIはTwitterデータを取得する公式の方法であり、実際にはうまく動作するので、APIを使用しない理由はわかりません。ウェブスクレイピングは回避策ですが、推奨されていません。また、あなたはそれを大切にしたいので、満足できるとは思えません。 Gnipからデータを購入することもできます。

Answer 2

twitterからコーパスを作成する方法についての記事があります。それは“TWORPUS – An Easy-to-Use Tool for the Creation of Tailored Twitter Corpora”と呼ばれます。私はそれにもライセンスの問題などをカバーするので、それを読むことをお勧めします。彼らはまたGithubのコードを提供します。

実際、Twitterデータダンプを直接ダウンロードすることはできません。 1つのつぶやきをダウンロードしてコーパスに保存することができます。しかし、そのデータを共有することもできません。したがって、著者はTworpusクライアントを構築してプライベートなtwitterコーパスを作成しました。