Javascriptでウェブページ 'オブジェクト'を取得

Question

私は記録する必要がある膨大なデータフィールドを持つウェブページがオンラインです。 そして普通の人のように私は手でそれをしたくありません。 ようなので、だから、私のデータフィールドへのアクセスを与えるWebページ「オブジェクト」」「インポート」にそれが可能である： 『インポート』フィールド内のデータを返します

myWebpage.getElementById("field1").value; 

すべてのヘルプ。これに感謝しています。またはいずれかの他の選択肢ことになる。 おかげ

それとも誰かが、これは他の言語で行うことができることを任意の簡単な方法を共有すること自由に感じている場合を！

Answer 1

が持っている：

http://www.outwit.com/

はまた、この情報を見てみましょう見てくださいPhantomJS

ここでは、Webページからいくつかの要素を取得する例を示します：

var page = new WebPage(), 
    url = 'http://lite.yelp.com/search?find_desc=pizza&find_loc=94040&find_submit=Search'; 

page.open(url, function (status) { 
    if (status !== 'success') { 
     console.log('Unable to access network'); 
    } else { 
     var results = page.evaluate(function() { 
      var list = document.querySelectorAll('span.address'), pizza = [], i; 
      for (i = 0; i < list.length; i++) { 
       pizza.push(list[i].innerText); 
      } 
      return pizza; 
     }); 
     console.log(results.join('\n')); 
    } 
    phantom.exit(); 
}); 

Answer 2

それは本当にあなたのスキルセットに依存します。 RubyやPythonのようなスクリプト言語を学ぶことができれば、書くのはとても簡単ですこれらの言語のWebクローラー/スクレーパーGoogleのWebクローラを（挿入言語で）簡単に見つけることができます。あなたがそのようにプログラム的に傾斜されていない場合は

、次のようなFFの拡張機能を試すことができます1本：

http://www.slideshare.net/michelleminkoff/almost-scraping-web-scraping-without-programming