すぐにScrapyリクエストを実行し、解析メソッドで返されたレスポンスを取得するにはどうすればよいですか？

Question

すぐにScrapyリクエストを実行し、解析メソッドで返されたレスポンスを取得する方法は？

私は別のリンクからいくつかの情報を取得し、私は元のリンク（解析メソッド）から持っている現在の情報と組み合わせる必要があります。したがって、私は治療要求を実行し、返された応答を得ることができる必要があります。

Answer 1

私あなたがScrapyRTを探していると思う（scrapyリアルタイム）

https://blog.scrapinghub.com/2015/01/22/introducing-scrapyrt-an-api-for-scrapy-spiders/

ScrapyRTは、指定されたURLのScrapyに要求をスケジュールすると「FOOを使用しますhttp://localhost:9080/crawl.json?spider_name=foo&url=http://example.com/product/1

例を参照してください。 'コールバックとしてスパイダーの解析メソッド。ページから抽出されたデータはJSONにシリアル化され、レスポンス本文に返されます。