Apache ApexはHDFSに依存していますか、それとも独自のファイルシステムを持っていますか？

Question

私はApache ApexがHadoopとYARNで動作することを理解します。 HDFSを使用してデータを保護しますか？それとも独自のものがありますか？

Answer 1

Apache Apexには独自のファイルシステムがありません。 Apexで記述されたストリーミングアプリケーションは、デフォルトでは、チェックポイント、永続性、およびアプリケーション固有のデータの保存にHDFSを使用します。

Answer 2

Apache Apexは、フォールトトレランスのためにオペレータ状態のチェックポイントを使用します。 Apexでは、HDFSを使用してこれらのチェックポイントをリカバリ用に書き込みます。ただし、チェックポイント用のストアは設定可能です。 Apexにはcheckpoint to Apache Geodeの実装もあります。 Apexはまた、HDFSを使用して、アプリケーションを起動するために必要な、アプリケーションjar、その依存関係、および設定などを含むアプリケーションパッケージなどの成果物をアップロードします。