URLからhtmlタグを取得するには？

HTMLタグをすべてURLから取得して印刷するにはどうすればよいですか？（mechanize、urllibまたは任意の他、あなたが望むを使用して）URLからhtmlタグを取得するには？

2010-12-14 Jack Null

タグのみが必要ですか？ – dheerosaur

import urllib 
print urllib.urlopen('http://www.example.com/blah').read()

2010-12-14 04:34:35

一部のサイトでは圧縮が使用されていますが、これは悲惨な結果になります。それを理解するために私はすっごく時間がかかりましたが、回避策は本当に醜いものでした。見つけたら投稿します。 +1 – Blender

HTTP仕様に違反しているサイト。適切なAccept-encodingが送られない限り、圧縮されたデータを返すべきではありません。 –

それを取得するには、あなたが（elementtree、BeautifulSoup、lxmlまたは任意の他、あなたが望むを使用して）何を得る解析し、あなたが望むものを持っています。

2010-12-14 04:39:17

答えて