ウェブサイトは、ブラウザに表示されますが、Pythonの

Question

で開いたときに喜んブラウザで開き、Pythonで開いたときに、次のように403 HTTPエラーを返すのウェブサイトがある403を返す：

from bs4 import BeautifulSoup 
import urllib2 

link = 'http://niezalezna.pl/' 

r = urllib2.urlopen(link).read() 
soup = BeautifulSoup(r, 'lxml') 

print soup.prettify() 

ウェブサイトに人気がありますニュースサービス。上記のようなコードを使用してURLをオープンすると、HTTP 403エラーを返すようにすることはできますか？ ありがとう、

Answer 1

上記のコメントのおかげで答えが見つかりました。コードは以下の通りです、完全な答えはここで見つけることができます：これは、サイトはスクレーパーを許可しないことを意味Changing user agent on urllib2.urlopen

from bs4 import BeautifulSoup 
import urllib2 

link = 'http://niezalezna.pl/' 

opener = urllib2.build_opener() 
opener.addheaders = [('User-agent', 'Mozilla/5.0')] 
response = opener.open(link) 

soup = BeautifulSoup(response, 'lxml') 

print soup.prettify()