サイズNのCassandraクラスタからサイズN +/- Mの別のクラスタにデータを移行する方法

Question

1つのcassandraクラスタから異なるリングサイズの別のcassandraクラスタにデータを移行する方法を理解しようとしています。 5ノードクラスタから7ノードクラスタへ。

私はsstable2jsonを見てきました。なぜなら、特定のcassandraノード上のSSTable用のjsonファイルを作成するからです。私の考えは、リング内の各ノードの列ファミリでこれを行うことでした。だから、5ノードリングでは、これは私に5つのjsonファイル、各ノードにある列ファミリに格納されているデータ用の1つのファイルを与えるでしょう。

次に、jsonファイルを1つのファイルにマージし、json2sstableを使用してサイズの新しいクラスタにインポートします（7）。私は、cassandraがノード間で均等にデータを複製/均衡させることを望んでいましたリングでは、私はただSSTablesが一度書かれて不変であることを読んだ。だから私が言及したことをしたならば、私は1つのノード上にある私の列ファミリ内のすべてのデータを持つリングで終わるだろう。

誰かが、あるクラスタから別のリングサイズの別のクラスタにデータを移行するプロセスを理解する手助けをしてくれますか？

Answer 1

より良いhttp://wiki.apache.org/cassandra/Operations#Import_.2BAC8_exportを定義したトークンに基づいて自分自身のバランスをとるだろう。

通常のsstableloaderは、このような順序で使用されます。

1. 右ノードにsstablesでデータをストリーミングするSSTableWriter
2. 使用sstableloader（ビン/ sstableloaderパス・ツー・ディレクトリを使用してローカルsstablesを作成します。 -full-of-sstables）である。ディレクトリ名はキースペースであるとみなされます。既存のCassandraデータディレクトリを指す場合、その名前がキースペースになります。

新しいcluter Bに既存のクラスタAからデータをストリーミングするために探しているので、あなたはクラスタAに、各ノード上のデータに対して使用上の

詳細をsstableloaderを実行するにまっすぐにスキップすることができますsstableloaderはthis blog postです。

Answer 2

私はこれが問題のように見えるかもしれないとは言いません。

1. あなたの新しいリングを作成し、新しいリングにhttp://wiki.apache.org/cassandra/Operations#Token_selection
2. インポートデータに従って適切に各ノードのトークンを定義します。新しいものにストリーミングするために、古いリングからsstables上で使用するビン/ sstableloader：
3. リングは、あなたが

Answer 3

sstable2jsonを使用する必要はありません。あなたができるスペースがある場合：

1. が
2. は、新しいサーバーのそれぞれに一緒にすべてを入れて、古いリング上のすべてのノードからすべてのsstablesを取得し
（同じ名前を持つ任意の名前を変更）
3. 新しいリングの各ノードでnodetool cleanupを実行すると、それらのノードに属していないデータは破棄されます。

Answer 4

次のようにいくつかの手順を実行できます。 1。7つのノードを5つのノードクラスタに結合し、各ノードを独自のリングトークンでセットアップします。この時点では、12のノードを持つクラスタが存在する可能性があります。 2.ステップ1で新しいクラスタから5つのノードを削除します。 3. 5つのノードを自分で移動した後、各ノードのトークンリングを設定します。 4. 7ノードクラスタの修復。