使用BeautifulSoupでHTMLを解析するが、数回実行した後BeatuifulSoupオブジェクト

Question

html = urlopen(url) 
bs = BeautifulSoup(html.read(), 'html5lib') 

を作成する際に立ち往生は、プロセスがBeautifulSoup(html.read(), 'html5lib')で立ち往生、私は「lxmlの」と「html.parser」にHTMLパーサから変更しようとしています。しかし、問題は解決しません。 BeautifulSoupにバグはありますか？どうすればこの問題を解決できますか？

更新 私はこの

print('open the url') 
html = urlopen(url) 
print('create BeautifulSoup Object') 
bs = BeautifulSoup(html.read(), 'html5lib') 

コンソール印刷create BeautifulSoup Objectのように、プログラム内のいくつかのログを追加して、ちょうどカーソルが点滅してそこにとどまります。

Answer 1

同じ問題が発生しましたが、応答がいくつかのエラーが発生した場合、urlopen()リソースが正しく閉じないため、プログラムがhtml.read()で停止していることがわかりました。

あなたがこのように変更することができ

：

with urlopen(url) as html: 
    html = html.read() 
bs = BeautifulSoup(html, "lxml") 

それとも、このようurllibよりも優れているrequestsパッケージを、使用することを選択することができます

import requests 

html = requests.get(url).text 
bs = BeautifulSoup(html, "lxml") 

が、それはあなたの問題を解決することを願って