2011-01-18 12 views
-1

最近、グループ購入クーポンをOne-Stopで購入できるサイトがいくつか見つかりました(例:http://dealery.com)。私はこれらのサイトがさまざまな日々の取引サイトからどのように取引情報を得ているのだろうかと思っています。彼らはAPIを使用していないと確信しています。すべての日々の取引サイトがAPIを提供しているわけではないためです。Daily Deal Sites Aggregators

スクリーンスクレイピングをしていますか?または、RSSフィードを使用して独自のデータベースを構築していますか? 誰かがこの解決策を知っていれば、分かち合ってください。私はそれを高く評価します。

ありがとうございました。

答えて

1

これはちょっと古いですが、私はここであなたの質問に答える時間がかかると思っていました。ローガンが指摘したように、1 Agriyaなどの取引集約スクリプトは擦り傷に3つの方法で日々の取引のウェブサイトからデータを開発しました:

  1. それが出てデータを解析し、利用可能
  2. RSSフィードからのデータを解析し、これは、取引のウェブサイトのHTMLページ

オプション1と2のうち、必要なデータを解析するために正規表現を使用しています

  • Commission Junctionのようなアフィリエイトネットワークが提供するXMLフィードのかなり達成することは簡単ですが、オプションです3は、あなたがかなりグーであることが必要です正規表現の書式設定時にdを指定します。また、取引サイトでHTMLコードを少し変更すれば、正規表現をやり直す必要があるという悩みがあります。

  • 0

    オーストラリア最大のアグリゲータを運営しています。データを取得するには、次の方法を使用します。 (推奨)サイトのXMLフィードから

    • 解析データサイトRSSフィードから
    • 解析データ
    • ピーターは、画面スクレーピングが痛み際のビットすることができ言及したよう

    こするカスタムスクリーンサイトはコードを変更しますが、これは頻繁には発生しません。たぶん、1か2つのサイトを1か月に更新する必要がありますか?

    0

    ディーラーではRSSフィードやAPIを使用している可能性があります。これは、私が実際に集計したサイトがRSSフィードやAPIを提供しているからです。

    他のサイト:私は彼らから集計サイトのいくつかのためにRSSフィードやAPIを見つけることができないので、

    はスクレーピング画面を行う可能性があります。

    関連する問題