レール3宝石：シンプルなスクレーパー

Question

レール用のスクレーパー宝石はありますか？私は最近のブログ記事を読んで覚えていますが、それを気にすることはできません。

ありがとう

Answer 1

Nokogiri、また SelectorGadgetをチェックアウト - Mechanizeの、Hpricotも非常に便利です、あなた

Answer 2

ロットがあります。 ScrAPI（http://railscasts.com/episodes/173-screen-scraping-with-scrapi参照）またはNokogiri（http://railscasts.com/episodes/190-screen-scraping-with-nokogiriを参照）を試してください。

Answer 3

のためのCSSセレクタを生成します。これらのツールを起動する方法を知るためには、以下のリンクを参照してください - （XPathを使用せずに、わずか5行でシンプルなRubyのスクリーン・スクレーパー）

http://rorguide.blogspot.com/2011/04/simple-ruby-screen-scraper-in-just-5.html（Mechanizeの、HpricotとXPathを使用した簡単なRubyのスクリーン・スクレーパー）

http://rorguide.blogspot.com/2011/04/simple-ruby-screen-scraper-using.html

Answer 4

ScrAPIとNokogiriの両方を試してみました。

Nokogiriは、さまざまなエンコーディング（utf、windows-XXXXなど）に対してはるかに堅牢です。それだけで動作します。

ScrAPIでは、まず、in this articleのようにエンコードを検出する必要がありました。 Nokogiriはエンコードをうまく処理するので心配はありません。