BeautifulSoupは値を返しません

Question

私はBeautifulsoupを初めて使用していますが、問題が発生しているようです。私が書いたコードは私の知る限り正しいが、出力は空である。それはいかなる価値も示さない。

import requests 
from bs4 import BeautifulSoup 

url = requests.get("https://www.nseindia.com/") 

soup = BeautifulSoup(url.content, "html.parser") 

nifty = soup.find_all("span", {"id": "lastPriceNIFTY"}) 

for x in nifty: 
    print x.text 

Answer 1

ページはjavascriptでレンダリングされているようです。 requestsは、JavaScriptによって読み込まれたコンテンツを取得できない場合、JavaScriptレンダリングの前に部分ページを取得します。あなたはそのように、このためにdryscrapeライブラリを使用することができます。

import dryscrape 
from bs4 import BeautifulSoup 

sess = dryscrape.Session() 
sess.visit("https://www.nseindia.com/") 
soup = BeautifulSoup(sess.body(), "lxml") 
nifty = soup.select("span[id^=lastPriceNIFTY]") 
print nifty[0:2] #printing sample i.e first two entries. 

出力：

[<span class="number" id="lastPriceNIFTY 50"><span class="change green">8,792.80 </span></span>, <span class="value" id="lastPriceNIFTY 50 Pre Open" style="color:#000000"><span class="change green">8,812.35 </span></span>]