ウェブサイトの英語版のスクラップ

Question

英語版の日本語版を掻き取ろうとしていますが、日本語版と英語版のリンクは同じですが、英語版を傷つけるようにbeautifulsoupに指示する方法があります日本人の代わりに？私はこすりしたい

リンク：

https://data.j-league.or.jp/SFMS02/?match_card_id=17975

Answer 1

lang=en URLクエリパラメータを追加すると、実際に機能することを実証するために：あなたもenとSFCM01LANGクッキーを追加することができます

>>> import requests 
>>> from bs4 import BeautifulSoup 
>>> 
>>> url = "https://data.j-league.or.jp/SFMS02/?match_card_id=17975" 
>>> english_url = "https://data.j-league.or.jp/SFMS02/?match_card_id=17975&lang=en" 
>>> 
>>> print(BeautifulSoup(requests.get(url).content, "html.parser").find(class_="team-name").get_text(strip=True)) 
サガン鳥栖 
>>> print(BeautifulSoup(requests.get(english_url).content, "html.parser").find(class_="team-name").get_text(strip=True)) 
Sagan Tosu 

注意を値：

>>> url = "https://data.j-league.or.jp/SFMS02/?match_card_id=17975" 
>>> response = requests.get(url, cookies={'SFCM01LANG': 'en'}) 
>>> soup = BeautifulSoup(response.content, "html.parser") 
>>> print(soup.find(class_="team-name").get_text(strip=True)) 
Sagan Tosu