scrapy-redisパイプラインの使い方は？

Question

私は現在scrapy-redisを使用していますが、私はそれで大丈夫です、そして、私は別のコンピュータで同じredis serverを使ってクロールすることに成功しています。 しかし、私はscrapy-redisパイプラインを適切に使用する方法を理解していません。 私の理解では、スパイダーよりも別のスクリプトが必要だと思うので、データベースに保存するようなことができます。 私は正しく、スパイダーに何らかの形で依存している別のスクリプトを書かなければならないことを理解していますか？

Answer 1

パイプラインは別のスクリプトです。設定ファイルでは、パイプラインを有効にすることができます。パイプラインを使用して、クロールされた結果を任意のデータベースに格納できます。