lwp

0熱

1答えて

私は、HTML :: TreeBuilderを使用してクロールされたWebページ上で抽出を実行するPerl LWPを使用して継続的にクロールしています。私が作成したHTML :: TreeBuilderのすべてのインスタンスを慎重に削除しますが、クローラのメモリフットプリントはゆっくりだが着実に上がります（クロールされているすべてのページで10〜30バイトずつ確認しています（Valgrindを使用

3熱

2答えて

NTLM認証でLWPを使用する場合のサブルーチンエントリのワイド文字

NTLM認証で構成されたIISサーバーに対してLWPを動作させようとしています。 NTLM認証がサーバー上でオフになっている場合、コードは正常に機能するので、ここで唯一の問題はNTLM認証であると仮定します。はこれまでのところ、私は、次があります。 my $ua = LWP::UserAgent->new(agent => "whatever", timeout => $t

3熱

2答えて

変更されたウェブページを検出する方法は？

私のアプリケーションでは、LWPを使用して定期的にWebページを取得します。とにかくWebページが何らかの点で変更されている（明示的に比較している以外の）2つの連続したフェッチの間にあるかどうかをチェックするにはどうしますか？可能性のある変更を確認するために古いシグネチャと比較して抽出できる下位プロトコル層で生成されているシグネチャ（CRCなど）はありますか？

0熱

1答えて

LWP :: UserAgent 6.04、POSTの内容とコンテンツの一部としての新しい動作

古い（5.8x？）バージョンからLWP 6.04にアップグレードした後、分散アプリケーションで使用されていたコードが永遠に壊れ始めました。私はそれをPOSTの\ nの処理の変更に追跡しました。予想通りになってしまう、サーバー側の $良い：サーバー上 $post_data{'good'} = qq(This is a text line); $post_data{'bad'} = qq(T

0熱

2答えて

perlでWWW :: Scripterモジュールを使用して参照元を設定するには？私のクローラーのための

シンプルなコードは次のとおりです。 #!/usr/bin/perl -w use WWW::Scripter; $w = new WWW::Scripter('agent' => 'myAgent'); $w->use_plugin('JavaScript'); ### need to set a referrer header here #

0熱

2答えて

PerlでWWW :: Scripterモジュールを使って明示的にクッキーをクリアするには？

シンプルperlのコードは次のとおりです。 use WWW::Scripter; ... my $w = WWW::Scripter->new('agent' => 'myAgent'); $w->use_plugin('JavaScript'); ... $w->ge

8熱

2答えて

SSL_verify_modeのSSL_VERIFY_NONEを選択する

証明書を持たず、プロキシをバイパスする必要がある内部sslサイトへのクライアント接続を作成しようとしています。私はプロキシをバイパスすることができるよ、と私は、サイトに接続し、クライアント接続を作成し、しかし、私はこの醜い警告取得していますすることができています：C:/strawberry/perl/site/lib/LWP/Protocol/http.pm line 31で *********

8熱

3答えて

SSLとクライアント証明書でLWPを使用する

私はPHP/cURLからPerlとLWP :: UserAgentにアプリケーションを移植しています。 WebサーバーにPOSTリクエストを行い、クライアント証明書とキーファイルを提供する必要があります。私は複製しようとしているPHPコードはこれです： my $ua = LWP::UserAgent->new(); $ua->ssl_opts( SSL_verify_mode => 0,

-2熱

1答えて

送信POSTデータ

login.htmlと <form method="POST" action="login.php"> <input type="text" name="username"> <input type="password" name="password"> <button class="_sdf3">Login</button> </form> login.pl #!/usr/bin/p

10熱

2答えて

HTTPリクエスト（Perl）でコンテンツをPOSTする方法

use LWP::UserAgent; use Data::Dumper; my $ua = new LWP::UserAgent; $ua->agent("AgentName/0.1 " . $ua->agent); my $req = new HTTP::Request POST => 'http://example.com'; $req->content('port=8', 't