javascriptで生成されたコンテンツをWebページから直接取得する方法はありますか？

Question

現在、Webページからjavascriptで生成されたコンテンツをスクラップするためにPhantomJSでセレンを使用しています。これで私が探している結果が得られますが、スクレイピングする前にページが読み込まれるのを待つ必要があるため、遅いアプローチです。私が探しているコンテンツを生成するjavascriptを直接実行する方法はありますか？もしあれば、私は現在使っているよりも速いアプローチでしょうか？

ありがとうございます！

Answer 1

残念ながら、ありません。私はこの問題に何度か遭遇しました。私が思いついた唯一の解決策は、あなたがすでにやっているように問題に近づけることです。 コンテンツがjs-generatedであるため、ブラウザから取得する方法は唯一取得する方法ですので、好きなドライバでセレンを使用してください。