avro

21熱

5答えて

Avroバイナリエンコーダを使用してKafkaメッセージをエンコード/デコードする方法は？

私はKafkaから読み書き中のメッセージにAvroを使用しようとしています。誰もAvroバイナリエンコーダを使用してメッセージキューに置かれるデータをエンコード/デコードする例がありますか？ 私はカフカの部分よりもAvroの部分が必要です。あるいは、私は別の解決策を検討すべきでしょうか？基本的には、私はスペースに関してJSONのより効率的なソリューションを探しています。 AvroはJSONよりコン

avro apache-kafka 2011-11-28

---

1熱

2答えて

Hadoop Streamingの下位互換性

AFAK、Hadoop Streamingはテキスト入力のみをサポートします。つまり、データは行単位で整理されます。 C++で書かれた同じマッパープログラムで、異なるバージョンのログ行をサポートしている場合、下位互換性が必要な場合は、マッパーコードが乱雑になります。 私はavroまたはprotobufを使用していましたが、ストリーミングモードではサポートされていないようですが、それは本当ですか？

hadoop mapreduce avro 2011-11-02

---