プログラムでこのページの画像を取得するにはどうすればよいですか？

Question

URL http://www.fourmilab.ch/cgi-bin/Earthには、地球のライブマップが表示されます。

このURLをブラウザ（FF）で発行した場合、画像はうまく表示されます。しかし、私は同じページをフェッチするために 'wget'を試してみると、私は失敗します！ここで

は、私が最初に試したものです：おそらく他のすべてのフォームフィールドがあまりにも必要とされている

wget -p http://www.fourmilab.ch/cgi-bin/Earth 

思考、私は、上記のページで「ソースの表示」をやった様々なフィールドの値を書き留め、その後、次のURLを発行しました：

wget --post-data "opt=-p&lat=7°27'&lon=50°49'&ns=North&ew=East&alt=150889769&img=learth.evif&date=1&imgsize=320&daynight=-d" http://www.fourmilab.ch/cgi-bin/Earth 

まだ画像がありません！

誰かがここで何が起こっているのか教えてもらえますか？ CGIやフォームベースのwgetsを持つ「邪魔者」はありますか？どこで（本やオンラインリソース）そのような概念を説明するだろうか？

Answer 1

ページのソースコードを調べる場合は、imgの中にアースの画像が含まれているリンクがあります。たとえば：

 
<img 
src="/cgi-bin/Earth?di=570C6ABB1F33F13E95631EFF088262D5E20F2A10190A5A599229" 
ismap="ismap" usemap="#zoommap" width="320" height="320" border="0" alt="" /> 

「ディ」パラメータを与えることなく、あなただけではない画像そのもののために、この画像を参照して、Webページ全体を求めています。

編集：「ディ」パラメータは、とにかく、受信したい地球の「一部」ではなくPOSTをGET例

 
wget http://www.fourmilab.ch/cgi-bin/Earth?di=F5AEC312B69A58973CCAB756A12BCB7C47A9BE99E3DDC5F63DF746B66C122E4E4B28ADC1EFADCC43752B45ABE2585A62E6FB304ACB6354E2796D9D3CEF7A1044FA32907855BA5C8F 

Answer 2

使用のためにしてみてくださいコードしています。彼らはバックグラウンドでCGIプログラムとはまったく異なっています。

Answer 3

あなたがダウンロードしているのは、HTMLページ全体であり、イメージではありません。画像やその他の要素もダウンロードするには、--page-requisites（場合によっては--convert-links）のパラメータを使用する必要があります。残念ながらrobots.txtは/cgi-bin/の下のURLへのアクセスを許可しないため、/cgi-bin/の下にある画像はダウンロードされません。 AFAIKには、ロボットプロトコルを無効にするパラメータはありません。 Ravadreに続き

Answer 4

、

wget -p http://www.fourmilab.ch/cgi-bin/Earth 

は<IMG>タグが含まれているXHTMLファイルをダウンロードします。

imgタグ以外のすべてを削除するようにXHTMLを編集し、それを別のwget -pコマンドを含むbashスクリプトに変換して、？をエスケープしました。そして=本当に

私はこれを実行すると、私はearth.jpg

ないと改名14KBのファイルを持っ、プログラム、方法は、私はそれをしなかったが、私はそれを行うことができると思います。

@someeveloperが述べたように、di値は（時間に依存するので）変化しています。

Answer 5

皆さん、私が最後にしたのはここです。最初のwget自体で画像を取得する方法... Firefoxを使ってブラウズするときと同じユーザーエクスペリエンスを与えてくれました。

#!/bin/bash 

tmpf=/tmp/delme.jpeg 
base=http://www.fourmilab.ch 
liveurl=$(wget -O - $base/cgi-bin/Earth?opt=-p 2>/dev/null | perl -0777 -nle 'if(m@<img \s+ src \s* = \s* "(/cgi-bin/Earth\?di= .*?)" @gsix) { print "$1\n" }') 
wget -O $tmpf $base/$liveurl &>/dev/null