を要求し、私はこのページ全体をこすりしようとしているが、それだけの一部を取得しています:スクレイプ全体スクロール負荷のページを具体的に
http://store.nike.com/us/en_us/pw/mens-shoes/7puZoi3?ipp=120
私が使用している場合:
r= requests.get('http://store.nike.com/us/en_us/pw/mens-shoes/7puZoi3?ipp=120')
以上の項目は、あなたが下向き
スクロールすると、私はこのようなPyQtはでいくつかのソリューションがあります知って読み込むので、それだけで、ページの「目に見える」部分を取得します:
Repeatedly scroll to the bottom of a page using PyQt QWebKit
が、すべての項目が読み込まれるまで継続的にWebページの一番下までスクロールPythonの要求を持ってする方法はありますか?