8
一時的に404エラーが発生するサイトがあります。しかし、私はそれが動作するブラウザに貼り付ける。 404ステータスコードのリンクを5回再試行するように指示する方法。404のリンクがスクレイピーに見つかりませんでしたか？
A
答えて
14
2つのScrapyの設定が必要なものに関係があります。
- RETRY_HTTP_CODES：あなたは
404 - RETRY_TIMESが含まれるように、プロジェクトのデフォルト値をオーバーライドする必要があります。ただ
5
関連する問題
- 1. FCGIのステータス：404が見つかりませんでしたか？
- 2. 404ページが見つかりません要求したページが見つかりませんでした。 codeigniter
- 3. カルマカバレッジは常に404が見つかりませんでした。
- 4. ノードJSとAngularJS - スクリプトとリンクが見つかりません - 404
- 5. 404が見つかりません "要求されたURLが見つかりませんでした"
- 6. Giiのプロダクションが見つかりませんでした（404）
- 7. 404ページが見つかりません
- 8. Microsoft.Owin.Testing.TestServer 404が見つかりません
- 9. 404 node_modulesが見つかりません
- 10. ページが見つかりません（404）
- 11. Socket.io 404が見つかりません
- 12. Nokogiriで404エラーが見つかりませんでした。
- 13. ocLazyLoadで404リソースが見つかりませんでした。
- 14. polylang：エラー404ページが見つかりませんでした。エラー
- 15. スプリングブート404が見つかりませんでしたエラー
- 16. 404リソースが見つかりませんでした。api-platform
- 17. ウェブサイト404が見つかりませんでしたnginx？
- 18. Symfony paramconverterオブジェクトが見つかりませんでした。404
- 19. djangoカスタム404が見つかりませんでしたページ
- 20. Laravel ajax 404が見つかりませんでした。
- 21. HTTP 404が見つかりませんでした。tomcat 8.0サーバー
- 22. WooCommerce 2.6カスタムエンドポイント404が見つかりませんでした。エラー
- 23. Firebase 404が見つかりませんでした
- 24. Cordovaは404が見つかりませんでした
- 25. 404リソースが見つかりませんでした
- 26. PhoneGap - Jsonpエラー404が見つかりませんでした。
- 27. Polymer - 404が見つかりませんでした
- 28. 404が見つかりませんでしたファイルが見つかりませんMVC
- 29. キーストーンエラー404「このアドレス（404）でページが見つかりませんでした」
- 30. リンク上にドッカーコンテナが見つかりませんでした
に設定たぶんあなたは、治療やサイトを使ってあまりにも多くのリクエストをしているだけかもしれない404 returninig？ – adt
1秒間に1つのリクエストを試しても、失敗することがあります。治療中に404状態を再試行する方法はありますか？ –