Node.jsアプリでJavascriptを使用して外部Webページの情報/ Webスクラップを取得する方法は？

Question

私はNode.js用のTwit APIを使用しており、現在実行中のHeroku上で自分のコードをホストしています。私はダニエル・シフマンのチュートリアルに続き、http://shiffman.net/a2z/twitter-bots/とhttp://shiffman.net/a2z/bot-heroku/

https://en.wikipedia.org/wiki/Special:Randomに行き、タイトルを「取得」したいと思います。私はつぶやきとしてタイトルを投稿します。いくつかの研究の後、私はwebscrapingと呼ばれることをしたいと思う。 wikiページのタイトルがheadのhtmlファイルのtitleタグにあるとします。誰も私がどのようにURLにアクセスし、私が必要とする情報を得ることができるか知っていますか？どこから始めたらいいか分からない。 stackoverflowの検索結果は、jqueryとyahoo apiの使用についての古い回答につながった。私はそれはあなたがそれを行うためにGoogleから、人形遣いを使用することができますHerokuの

Answer 1

とcompatabileである知っているようにJavaScriptで解決策を

Github

Article

Answer 2

を見て、私が推薦する、参考になりますいくつかのクラウドサービスは、あなたのために多くの仕事を処理することができます。 JavaScriptを使用することができます

一部のWebクローラーのクラウドサービス、：あなたが訪問することができ、よりについては

• Apify

• Web robots

：Quora tread。