GeoMesa on HBase高速インポート

Question

HBase v1.2.6でGeoMesa v1.4.0を使用しています。 現在、私はHBaseQuickStartクラスの助けを借りて自分のデータをインポートしてインデックスを作成しています。残念ながら、大きなファイルの実行時間は非常に長くなります。 誰かがGeoMesaでbulkLoadを知ってプロセスをスピードアップしていますか？ ありがとうございます！

Answer 1

すぐに入手可能なGeoMesaは、バイナリ配布コマンドラインツールを使用してインジェストを提供します。入力ファイルから単純なフィーチャタイプへのマッピングを持つ 'コンバーター'ファイルを定義する必要があります。一度これを実行すると、複数のスレッドでローカルに実行することも、map/reduceを使用してリモートから実行することもできます。 Accumuloコマンドのドキュメントはhereですが、HBaseコマンドは同じ動作をしますが、パラメータは少し異なります。 HBaseツールのインストールに関するドキュメントはhereです。

Javaのコードをそのまま使用したい場合は、何かカスタムを行う必要があります。 map-reduce摂取を書く例はhereです。