2016-08-11 11 views
-3

私はScrapyを使用していて、それを使い始めたばかりのルーキーです。Scrapyを使用してウェブサイトの検索機能を使用する

私はそれにオンラインで何かを見つけることができないため、何か類似したstackoverflowで尋ねられたので、私は自分が一部に立ち往生を発見した!

私は基本的に.csvファイルから数行を読んでいますし、私はこのウェブサイト上の検索機能を使用したい「http://collectorsfrenzy.com/

どのように私はこの問題を回避行くべき?私は何も見つからなかったので、ほとんどどこを見ているかについてのガイダンスを探しています。

は、読書のための歓声:)

+0

そのウェブサイトは次の検索パターン[http://collectorsfrenzy.com/search?q={query}]を使用しているようですので、検索用語を追加して、結果のウェブページをスクレイプします。 – Grainier

+0

ありがとう!私が欲しかったものを正確にした!乾杯! – TheOlDirtyBastard

+0

@Grainier - この質問にあなたのコメントを回答として追加して受け入れられるようにしてください - コメントは時間の経過とともに失われるかもしれませんが、受け入れられる回答は_plusではありません。 「検索を試してみて、検索結果のURLのパターンを見てください。たとえば、これを参照するサイトは...」 –

答えて

0

まずありがとう、ウェブサイト内で使用される検索エンドポイント(このシナリオでは、すなわちcollectorsfrenzy.com/search?q={query})を識別してみてください。一旦それを見つけたら、それにあなたの検索語を追加して、それをクロールして結果のコンテンツをスクラップするための出発点として使用してください。

関連する問題