web-scraping

0熱

1答えて

現在、私のウェブサイトには、現在http://www.ronpaul2012.comにあるDonation Tickerを更新しようとしています。私は、iframeを含むstackoverflowの周りにいくつかのソリューションを試してみましたが、私の検索能力に欠けているか、彼らのサイトは私がどのように動作するか分からない（または私はjavascriptについて知りませんが、ここやそこにはいない）

3熱

2答えて

正規表現を使って何年にもわたる文章をどのように抽出できますか？

私はウィキペディアの記事を解析しています。私は1年ごとにすべての文を抽出したい。年は1000年から2012年までの何でもかまいません。以下は私が試してきた正規表現ですが、それを正しく得ることはできません。これを改善するのを助けてください。 $regex = '/\.\s.+\s[1|2][0-9]{3}\.\s/';

0熱

1答えて

再帰的または単純なPHPのループ

私はこのループを解決する方法を理解するいくつかの問題を抱えている：私は自分のために小さなスクラッパーを開発していると私はどのようにすべてまで2つのメソッド内のループに把握しようとしていますリンクはウェブサイトから検索されます。私はすでに最初のページからのリンクを取得していますが、問題は、私はすでに抽出された新しいリンクを検証するためのループを作ることができないということである。ここではは私の

3熱

1答えて

Pythonを使用したリモートWebサイトでのJavascriptイベントのトリガー

リモートWebページをスクラブしていくつかのデータを取得するための基本的なPythonコードを書きました。私が掻き取ろうとしている別のページでは、データは表示されず、<select>ボックスの値を変更した後にのみ表示されます。リモートWebサイトのjavascriptを使って除細動して掘り下げた後、AJAX（Prototypeのカスタム実装）を使用して、<table>の<tbody>を切り抜くこ

4熱

2答えて

disqusを使用してウェブサイトからのコメントを取得する

私はcnn記事からコメントを取得するためにスクレイピングスクリプトを書いています。たとえば、この記事：http://www.cnn.com/2012/01/19/politics/gop-debate/index.html?hpt=hp_t1 私は、cnnがコメントの議論にdisqusを使用することを認識しています。コメントの読み込みはウェブページベースではなく（前のページ、次のページ）、動的であ

2熱

4答えて

$ .ajaxを使用して別のドメインのHTMLをロードできないのはなぜですか？

マイドメイン： <!DOCTYPE html> <html> <head> <title>scrape</title> <script src="http://code.jquery.com/jquery-1.7.1.min.js"></script> </head> <body> <script> $.ajax({url:'http://their-domain

1熱

2答えて

JSoup - divの内容を抽出中にエラーが発生しました

私はAndroidプロジェクトで作業していますが、現在JSoupでアプリケーションのWebサイトからデータを抽出しています。私がターゲットとするウェブサイトはhereです。メインの情報テキストを抽出したいと思います。そのdiv要素のXPathが //div[@id='wikiAbstract'] ある public class Main extends Activity { /** Call

0熱

1答えて

ウェブサイトから販売ランクを抽出

this amazon siteからkindle booksの販売ランクを抽出しようとしています。売上ランクが3（要素名「SalesRank」）である上記の場合これは私が今 $xpath_kindle->query("//li[@id='SalesRank']")->item(0)->nodeValue; 任意のヘルプを大幅に

0熱

2答えて

コンテンツを自動的にデータベースに取り込む方法は？

mysqlデータベースに基本的な「休暇リゾート」のコンテンツを設定したいとします。リゾート名、説明、国名。どのメソッドを使用してそれを設定できますか？

0熱

3答えて

閲覧可能なすべての画像+ Facebookの友人のタグ付けされた場所を掻き取ることは可能ですか？

私はその人の画像（その画像は公開されていて、私の目に見えるもの、つまりFacebookの現在の友人）を選択し、その人物のすべての閲覧可能な写真をその写真のタグの位置とともにダウンロードしたいと考えています。とにかくこれは公に利用できるので、問題ではないはずです。イメージ上のタグ付きの場所を抽出する方法がわかりません。これはoyuがFacebook APIやその他の手段で行うことができるものですか