私はすぐにFIFOまたはFILOのオプションを気にしないが、それは将来的にはいいかもしれないのpython

Question

で良い永続同期キュー..

私が探しています何の素敵な速い簡単な方法です複数のプロセスで取得して置くことができるディスク上に（最大で1ギガバイトのデータまたは数千万のエントリ）格納します。エントリは単純な40バイト文字列であり、Pythonオブジェクトではありません。 shelveのすべての機能を実際に必要としないでください。

私はこれを見ましたhttp://code.activestate.com/lists/python-list/310105/ それは簡単です。新しいキューバージョンにアップグレードする必要があります。

もっと良いことがあると思いますか？電源が切れた場合、ピクルされたファイル全体が1つのレコードではなく壊れてしまうことが懸念されます。ファイルの使用

Answer 1

が動作していません？...

は停電から回復するジャーナリングファイルシステムを使用してください。それが彼らの目的です。

Answer 2

Celeryをお試しください。純粋なPythonではなく、RabbitMQをバックエンドとして使用していますが、信頼性が高く、永続的で分散性があり、長期的にはファイルやデータベースを使用するほうがはるかに優れています。

Answer 3

PyBSDDBと思っています。アクセスタイプとしてキューを選択できます。 PyBSDDBは、Oracle Berkeley DBに基づくPythonモジュールです。 同期アクセスがあり、Pythonバインディングから可能かどうかわかりませんが、別のプロセスからアクセスできます。 dbに書き込む複数のプロセスについて、私はthis threadを見つけました。