カフカ推奨システム構成

Question

私たちは、Kafkaへの私たちの流入が一定期間にわたって約2 TB/dayに上がると予想しています。私は2 brokers（別々のシステムでそれぞれ実行している）でKafkaクラスターをセットアップするつもりです。 2 TB/dayの処理に推奨されるハードウェア構成は何ですか？

Answer 1

Kafkaの場合、特定の設定があるかどうかわかりません。少なくとも私はカフカについての基本的なことを教えてくれます。必要なRAMが決まるので、1秒間に受け取るメッセージの量を知る必要があります。あまりにも十分なハードディスク容量があることを確認してください。 SSDを取得する必要はありません.SystemはRAMを使用してデータを保存するためです。キューのフラッシュ処理によってシステムが遅くなることがないように、かなり高速のハードディスクが必要です。

私は3カフカブローカーと3または4飼育サーバーも使用することをお勧めします。