flumeのスプールディレクトリソースのファイルの名前を変更するための書き込み権限を与えるべきです

Question

私は、スプールディレクトリソースから読み込み、いくつかの変換を行った後にhdfsに書き込むflumeエージェントを持っています。 flumeは処理されたファイルの名前を '.COMPLETED'に変更しようとしているので、私はスプールディレクトリへの書き込みの許可を拒否しました。

私は、機密データに書き込み許可を与えることがどれほど安全か疑問に思っていました。

がスプールディレクトリ

Answer 1

作業のスプールディレクトリソースの方法は、ファイルの名前変更を必要として処理されたファイルを識別するための水路のためのソリューションについてのラウンドです。

回避策として、ファイルの「読み取り専用」コピーを作成し、Flumeが書き込みアクセス権を持つスプーリングディレクトリにファイルをコピーするメカニズム（例：cronジョブ）を作成する方が安全です。 （そしておそらくdeletePolicy設定オプションは、ディスクを充填避けるために、immediateに設定。）

あなたは、このような機能を要求したい場合、私はhttps://issues.apache.org

で新しいチケットを作成することはお勧め