beautifulsoupを使用してiframeをスクラップしようとしました

Question

動画をスクラップしたかったのですが、beautifulsoupはiframeが読み込まれるのを待っていません。私はセレンを使ってみましたが、Google webdriverはページ全体が読み込まれるまで待っています。私はまた、ページの読み込みが完了した後に、ページソースを取得できませんでした。

ことが良いでしょうか：

これは私がbeautifulsoupてみましたが、私はそうiframe内に、ここでビデオのリンクを取得しようとしたもの

def get_vidCode_from_source(source_url): 
    source_code = requests.get(source_url) 
    plain_text = source_code.text 
    soup = BeautifulSoup(plain_text,"html.parser") 
    print(soup.find('iframe')) 

get_vidCode_from_source('http://anilinkz.io/one-piece-episode-769?src=3') 

を取得していない私のコードでしたセレン以外のiframeを取得することはできますか？

Answer 1

私はこれは少し古いです知っているが、このコードは、セレンを使用して、ページのソースの使用を得るために：

from selenium import webdriver 
browser = webdriver.Chrome() 
browser.get('http://anilinkz.io/one-piece-episode-769?src=3') 
soup = BeautifulSoup(browser.page_source, "lxml") 
browser.close() 
for x in soup.find_all('iframe'): 
    print(x)