Beautifulsoup4とPython 3であなたの動画をスクラップする方法

Question

ここに私の現在のコードがあります。私は何が間違っているのか分かりません。多分私はhtmlで十分深く掘り下げておらず、Beautifulsoupに正しいタグを与えているのでしょうか？現時点では、私のコードは空白を返しています。

from bs4 import BeautifulSoup 
from urllib.request import urlopen 
html = urlopen("https://www.youtube.com/watch?v=5_zrHZdhaBU") 
soup = BeautifulSoup(html,'html.parser') 
nameList = soup.findAll("div", {"id": "cp-2"}) 
for name in nameList: 
    print(name.get_text()) 

これは私が検査したコードです。

<div id="cp-2" class="caption-line" data-time="7.54"><div class="caption-line-time">0:07</div><div class="caption-line-text">but it was untucked.</div></div> 

***編集

コードは次のシェアボタンに「もっと」をクリックすることで見つけることができる私は、Pythonが私に戻って戻るために取得しようとしている「が、それはuntuckedでした」。次に、トランスクリプトをクリックすると、そこにすべてのテキストが表示されます。

Answer 1

ああ、それはAjaxを介してロードされています：ページを開き、Networkタブを開き、開始時刻（最新のリクエスト）でリクエストをソートし、YoutubeのCCボタンをクリックします。

あなたはapi/timedtextリクエストを受け取り、応答はXMLです。 はここで転写物への完全なURL：

https://www.youtube.com/api/timedtext?signature=1A03D323CBD455E9993B7AC447CA64764FA6FE75.59F4BD2D45A32E89FBF54B418EE2F763283A1007&asr_langs=fr%2Cja%2Cnl%2Ces%2Cru%2Cko%2Cit%2Cde%2Cpt%2Cen&key=yttt1&caps=asr&v=5_zrHZdhaBU&hl=en_US&expire=1480702409&sparams=asr_langs%2Ccaps%2Cv%2Cexpire&lang=en&fmt=srv3

でも、私は、このURLがどのように生成されるか分かりません。これには複雑なYouTubeスクリプトなどが必要です。

EDIT：This answer助けてください。あなたは、これらのパラメータのほとんどを省略すると、ちょうどこのURLを使用することができます。

一般的に

https://www.youtube.com/api/timedtext?&v=5_zrHZdhaBU&lang=en 

またはこの：

https://www.youtube.com/api/timedtext?&v={video_id}&lang={language_code}