カフカのパーティションが

Question

は私がでuser_idを改造することにより、ユーザイベントのNパーティションを作成したい増加するときのイベントの順序を保存する方法Nので、イベントは順番に消費者が順番に処理することができ、それら送られた。

私が今までNは、それぞれのパーティションと消費者の数を増やす負荷を処理し、にしたいのに十分ではありませんことを決定した場合、私は、ユーザーイベントを消費したときにイベントが注文維持するためにしなければならないのですか？

Answer 1

さて、パーティション数を増やして新しいトピックを作成し、すべてのイベントを新しいトピックにコピーすることができます。あなたが注文を維持するという方法では（指定されたuser_idに関して、とにかく元のスキームの異なるuser_idにまたがる注文についての約束はありません）。

もちろん、ダウンタイムが発生する可能性があります。ハッシュ計算が変更され、与えられたuser_idが複数のパーティションにまたがって分割される（そして順序が失われる）イベントが発生するため、パーティション数を増やすという単純な解決策は明らかに機能しません。パーティション数を増やすことの難しさは、最初にトピックを作成するときにパーティション数を重視したい理由の1つです。