ipcontrollerによる大量のメモリ使用

Question

私は現在IPython 0.10.2とPython 2.7を使用しています。私は自分のクラスタで1台のipcontrollerと20台のipenginesを起動します。コード構造は非常に簡単です。 MultiEngineClient.execute（）メソッドとMultiEngineClient辞書インターフェイス（例：mec ['a'] = b）を使用します。私の現在のアプリケーションは、ほぼ2日間実行する必要があります。しかし、10時間実行した後、私はipコントローラが3.1 GBのメモリを使用していることがわかりました。 MultiEngineClient.clear_properties（）を使用します。しかし、決してメモリを解放しません。誰もがipcontrollerのメモリを解放する方法を知っていますか？

Answer 1

残念ながら、IPython 0.10のコントローラでメモリを有効に解放することはできませんが、MultiEngineClient.clear_pending_results()メソッドが役立ちます。

0.11-0.12のコントローラは、結果を格納するためにデータベース（sqliteまたはmongodb）を使用することができます。長時間実行すると、ギガバイトのスループットで不合理な長期的な成長が見られます。