結果がない場合にScrapyが空のファイルを生成しないようにする

Question

scrapyスパイダーから結果が得られなかった場合に、空のファイルを生成しないようにする方法はありますか？使用

使用例

scrapy crawl lorem -o /path/to/lorem.json 

バージョン：

• のPython 3.6.0
• Scrapy 1.3.0

Answer 1

それを行うための唯一の方法は、カスタムフィードを作成することですFileFeedStorageに基づくストレージクラスは、最初のアイテムが掻き出されたときにファイルの遅延開始を実装します。 - d efault FileFeedStorageはstartでファイルを作成します。その後settings.pyでそれをアクティブ：

FEED_STORAGES = { 
    '': 'path.to.CustomFileFeedStorage', 
    'file': 'path.to.CustomFileFeedStorage', 
} 

Answer 2

それはハッキングのビットだが、それが空の場合は、単にファイルを削除することができます。
これはbashで、単一のコマンドで達成することができます。あなたもそれの別名を設定することができ

scrapy crawl myspider -o test.json && if ! cat test.json; then rm test.json; fi 

。