8
一時的に404エラーが発生するサイトがあります。しかし、私はそれが動作するブラウザに貼り付ける。 404ステータスコードのリンクを5回再試行するように指示する方法。404のリンクがスクレイピーに見つかりませんでしたか？
A
答えて
14
2つのScrapyの設定が必要なものに関係があります。
- RETRY_HTTP_CODES：あなたは
404 - RETRY_TIMESが含まれるように、プロジェクトのデフォルト値をオーバーライドする必要があります。ただ
5
関連する問題
- 1. FCGIのステータス：404が見つかりませんでしたか？
- 2. Microsoft.Owin.Testing.TestServer 404が見つかりません
- 3. 404ページが見つかりません
- 4. Nokogiriで404エラーが見つかりませんでした。
- 5. Cordovaは404が見つかりませんでした
- 6. 404が見つかりませんでしたファイルが見つかりませんMVC
- 7. WSGIアプリケーション見つかりません - 404
- 8. URL書き直しで404ページが見つかりません
- 9. Codeignitorがサーバー上に404ページが見つかりませんでした。
- 10. 404が見つかりません - BLOBのdiffパラメータの1つが見つかりません
- 11. Grails - 404ファイルが見つかりません - なぜですか？
- 12. htaccess 404に問題が見つかりませんか？
- 13. サインアップフォームにCodeignitor 404のページが見つかりません
- 14. 404 - サーブレットサーブレットでリソースが見つかりません
- 15. Magentoで404が見つかりません1エラー
- 16. WCAT：404がログファイルに見つかりません
- 17. 404ページがYAMSに見つかりません
- 18. 404カテゴリがJoomla 1.7に見つかりません
- 19. 404オブジェクトがJavascriptファイルに見つかりません
- 20. 404ファイルまたはディレクトリがwcfに見つかりませんか？
- 21. Ubuntuを使って404が見つかりませんでしたsudo apt-get
- 22. WCFとSSL - エンドポイントが見つかりませんでしたエラー404
- 23. 暗号化された値に対して404が見つかりません
- 24. WooCommerce APIの返品404が見つかりません
- 25. MVC 4 - LogOffコントローラのアクション404が見つかりません
- 26. ngのリピートテンプレートが原因404（見つかりません）
- 27. Django ProjectのアプリケーションURLが見つかりません（404）
- 28. HTTP 404 - ファイルが見つかりませんInternet Explorer V6
- 29. アスタリスク+ SIP 404が見つかりません
- 30. xmlhttp.send（）は404が見つかりません（Ajax）
に設定たぶんあなたは、治療やサイトを使ってあまりにも多くのリクエストをしているだけかもしれない404 returninig？ – adt
1秒間に1つのリクエストを試しても、失敗することがあります。治療中に404状態を再試行する方法はありますか？ –