iはurllib3

Question

にurlopenの代わりに何を使用する必要があります私はこのような...前のようなコードを書きたい：

from bs4 import BeautifulSoup 
import urllib2 

url = 'http://www.thefamouspeople.com/singers.php' 
html = urllib2.urlopen(url) 
soup = BeautifulSoup(html) 

しかし、私は今urllib3をインストールする必要がありました。

coudntfind上記のコードを書き直す方法を理解するためのチュートリアルや例。たとえば、urllib3にはurlopenはありません。

何か説明や例をお願いします。

私はpython 3.4を使用しています。

Answer 1

urllib3をインストールする必要はありません。あなたのニーズに合ったHTTPリクエスト作成ライブラリを選択し、応答をBeautifulSoupに送ることができます。豊富な機能と便利なAPIのため、通常はrequestsです。コマンドラインにpip install requestsと入力してrequestsをインストールできます。これは基本的な例です：

from bs4 import BeautifulSoup 
import requests 

url = "url" 
response = requests.get(url) 

soup = BeautifulSoup(response.content, "html.parser") 

Answer 2

urllib3はurllibとurllib2とは別のライブラリです。標準ライブラリのurllibには、必要に応じて接続を再利用するなどの機能がたくさんあります。ドキュメントは次のとおりです。https://urllib3.readthedocs.org/

urllib3を使用する場合は、pip install urllib3が必要です。基本的な例は次のようになります。

from bs4 import BeautifulSoup 
import urllib3 

http = urllib3.PoolManager() 

url = 'http://www.thefamouspeople.com/singers.php' 
response = http.request('GET', url) 
soup = BeautifulSoup(response.data) 

Answer 3

新しいurllib3ライブラリは、あなたがそれに従うshuldご希望の結果を得るために素敵なドキュメントhere
があります

Import urllib3 
from bs4 import BeautifulSoup 

url = 'http://www.thefamouspeople.com/singers.php' 

http = urllib3.PoolManager() 
response = http.request('GET', url) 
soup = BeautifulSoup(response.data.decode('utf-8')) 

「デコードUTF -8 "の部分はオプションです。とにかく私が試してみたが、それを使わずに働いたが、私はオプションを投稿した。
ソース：User Guide