1
"Scrapy Crawl posts"コマンドを使用してScrapyを使用してブログをクロールしています。 5分ごとに新しい投稿を確認する必要があります。 どうすればいいですか？scrapyを使用してx分/秒ごとにウェブサイトをクロールする
ありがとうございます。
A
答えて
1
/etc/crontabファイルにこの行を含めるように編集します。スクリプトを5分ごとに実行するように設定します。 Windows用の
*/5 * * * * unix-username cd /your/path/to/scrapy-project/;scrapy crawl posts
あなたは答えを見てとることができhere
関連する問題
- 1. Scrapy - ウェブサイト全体をクロールする
- 2. Redux Sagaを使用してX秒ごとにアクションを送信
- 3. X秒ごと
- 4. Scrapyを使用してWebサイトを段階的にクロールする
- 5. Scrapyを使用してWebページのURLをクロールする
- 6. AndroidループメソッドごとにX秒
- 7. curlとxpathを使用してウェブサイトをクロールする
- 8. ページネーションが、私はこのウェブサイトをクロールしようとしているscrapy
- 9. X分ごとにウェブサイトからデータを記録して保存する
- 10. y秒ごとにx秒間pythonサブプロセスを実行します
- 11. x秒ごとに反応してapiをポーリングする
- 12. X秒ごとにリロードJPanel（スレッドを使用）
- 13. pythonを使ってウェブサイトをクロールする
- 14. Scrapyを使用してクロールすると、エラーは表示されませんが、何もクロールされません。
- 15. Scalingを使用してAngularJSベースのウェブサイトをクロールする
- 16. Ajaxは関数ごとにx秒ごとにPHPデータを取得します
- 17. Scrapy条件クロール
- 18. ウェブスクレイパーは数秒ごとにウェブサイトを取得します
- 19. ウェブサイトをスクラップするために、Pythonでx秒ごとにループを実行します。
- 20. Python- Scrapyを使用してWebページをクロールし、Javascriptを満たす
- 21. 10秒ごとにFTPを使用してテキストファイルを取得
- 22. geographic.org/streetviewをクロールするときにScrapyを使用してエラーを繰り返すことは何もない
- 23. コントロールのプロパティをX秒ごとに編集します
- 24. IframeはX秒ごとにsrcを変更します
- 25. divのトップポジションをx秒ごとに変更します。
- 26. ソフトウェアライセンスシステム - X秒ごとに鍵の有効性をチェックします
- 27. AndroidはX秒ごとにタスクを実行します
- 28. x秒ごとにブートストラップヘッダーイメージを変更するには？
- 29. クロール中にScrapyを使用して出力を書き込もう
- 30. シェルx秒間に5秒ごとにコマンドを実行するスクリプト
を述べたあなたは、UNIXを使用してか、窓の上にあるされていますか？ –
@ kiran.koduru windows :) – user6712306
@ user6712306これはコードを共有していないサイトです。あなたが助けを必要とした後にあなたの試しコードを入れてください。 –