screen-scraping

1熱

2答えて

私はプログラミングの世界では初めてです。私のプロジェクトでは、attachmateを使用してメインフレーム画面をスクレイプする必要がありますか？誰でも画面スクレイピングが何であるか、どのように機能するのか教えていただけますか？ありがとうございます。

-1熱

1答えて

既存のapiなしでサイトにフックするアプリの言語/フレームワークに関するアドバイス

私は既存のウェブサイトの機能を強化するために構築したいウェブサイトを持っています。現時点ではサイトにはAPIがありません（明らかにそれは著作物にあります）。私が理解するように、必要なコンテンツのページを掻き分けなければならないでしょう。私はPHPとColdfusionで作業しており、既存のホストからPHPとRubyにアクセスできます。私はどのような言語やフレームワークがこのタイプの作業に最適だろ

0熱

2答えて

Javaのスクリプトを扱うことができるJavaのフリーAPI

JavaScriptでデータを簡単に掻き集めることができる、Javaで強力な無料API /ライブラリが必要です。 httpclient、selenium、 htmlunitを使用してWebから公開データを取得しようとしましたが、スクリプト値を取得できませんでした。セレンはブラウザを開き、javacript の値を除くすべてのコマンドを実行します。私はあなたからの提案を歓迎します。ありがとうご

5熱

1答えて

画面からピクセルを読み取る方法は？

私はウェブゲームのための簡単なボットを作ろうとしているので、画面上のピクセルの色を読み取れるようにしたいと考えています。私はGetPixel（）でWindows上でこれをやったが、OS Xでそれを理解できないようだ。私はオンラインで探していてglReadPixelを見つけた。 XCodeで簡単なコマンドラインツールを作ったとき、私は次のコードを書いた。しかし、私はそれを動作させるように見えることは

0熱

3答えて

1日あたりのPythonスクリーンスクレイピングスクリプトを50回（合計8.3分）実行するベストプラクティス？

フロントエンドでは、ユーザーが自分のウェブサイトのリストを作成できるようにするPHPウェブアプリケーションがあります（最大5件）。バックエンドでは、ユーザが登録する各Webサイトのに対して、Pythonスクリプトが毎日実行され（〜10回の反復を実行します）。ウェブサイトごとの各スクリプトは、すべての反復を実行して終了するまでに約10秒かかります。その後、その結果を含むCSVファイルを作成します。

0熱

3答えて

スクリーンスクレーピング| Web Crawling

トピックに関する質問があります。誰かがスクレーパーを書くために、次の言語を使用することの利点と欠点を説明することができます：のJava/Groovyの Perlのペソセレンパイソン私はまた、掻き取り中にどんな種類の問題に直面することが予想されているのだろうと思っています。たとえば、私は断片のアイデンティティーを見つけ、それに対処する方法をまだ見つけていません。（私はhtmlunitを

3熱

2答えて

ASP.NET WebフォームにログインするJavaメソッド

私は、ASP.NET Webフォームにログインし、一旦認証されると、ファイルをダウンロードする必要のあるJavaプログラムに取り組んでいます。通常のHTTP GET/POSTは問題ではありませんが、Javaから接続するときにASPが私にセッションIDを与えていないようですが、ブラウザからのものです。 Firefoxでヘッダー情報を見ると、最初のログインからCookieが設定されているように見えます

2熱

1答えて

外部サーバへのソースコードの送信

私はスクリプトを書くことに興味があります.Greasemonkeyのようなツールを使ってブラウザに追加するのが簡単で、ページのHTMLソースコードを外部サーバに送ります。解析され有用なデータがデータベースに送られる。しかし、私はこのようなことは何も見ていないし、この作業にどのようにアプローチするのか分からない。私は、ある種のHTTP投稿が最良の方法だろうと思っていますが、私はそれらのアイデアを完

1熱

2答えて

IMDBのトップ250リストをスクレイピングすると、外国語でいくつかの結果が得られますか？

私は私がやってる映画の分析のための完全なリストをダウンロードして自分のサーバーのグラブこのページを持っている： http://www.imdb.com/chart/top をしかし、それがないとき、映画のタイトルの多くは別の言語で表示されています。代わりに、それは私に与えてショーシャンクの空にを言うの例：ПобегはШоушенка PHPで簡単なのfile_get_contentsをиз再現する

0熱

1答えて

私のbit.lyアカウントにあるリンクをバックアップするには？

Delicious bookmarks debacleの後、私はhttp://bit.lyのリンクをバックアップしたいと思います。私はAPI全体を見渡しましたが、短縮されたすべてのリンクを取得することはできません。誰かがそれを行うことができるソフトウェアを提案することはできますか？またはプログラム的にそれを行う方法があります。