Heisenbug独自のヘッドレスブラウザ

Question

私は、JavaScriptをサポートしたWebKit（C++/Qt4を使用）に基づくヘッドレスブラウザに取り組んでいます。これの主な目的は、JavaScript（Backbone.jsやその他のJavaScript MVCを参照）に基づいてWebサイトのHTMLスパンショットを生成できることです。私はページが完全にロードされるときを知るためにどのような方法がないことを承知している

（this questionを参照してください）、私はloadFinished信号を取得した後、そのため、（ドキュメントをhere）私はタイマーを作成し、 DOMコンテンツのポーリングを開始し（DOMのコンテンツごとにX msをチェックする）、変更があったかどうかを確認します。私は、ページがロードされたと仮定していない場合、結果を印刷します。私はこれが完璧ではない解決策ではないことをすでに知っていることを覚えておいてください。しかし、私が考えることができるのはこれだけです。もっと良いアイデアがある場合は、this question

注：タイマーは非ブロックであり、WebKit内で実行されているすべてが影響を受けてはいけないことを意味します。

いくつかのページでヘッドレスブラウザをテストした後、すべてが正常に動作するように見えます（少なくとも予想どおり）。しかし、ここでは、どこに虫が出現するのですか？ヘッドレスブラウザは、PHPスクリプトから呼び出される必要があります。PHPスクリプトは、一部の出力を待つ（呼び出しをブロックする）必要があります。

私のテストマシン（Apache 2.3.14、PHP 5.4.6）では、PHPスクリプトを実行すると、望遠のブラウザがウェブサイトを取得し、JavaScriptを実行してユーザーに表示される内容を出力します。プロダクションサーバーで同じスクリプトを実行すると、ウェブサイトが取得されます。 JavaScriptコードを実行して結果を出力します。

私が使用しているヘッドレスブラウザとPHPスクリプトのソースコードはhereです。

注：タイマーは（あなたがヘッドレスブラウザのソースコードに見ることができるように）1に設定されていますが、時間の大きな量を設定すること

注2を問題を解決していません。すべてのJavaScriptエラーをキャッチするには何も表示されないので、関数がないか、argsが間違っている、または他のタイプの不正なコードが原因ではありません。

私は2つのウェブサイトでヘッドレスブラウザをテストしています。 This oneはテストマシンとプロダクションサーバーの両方で動作していますが、this oneはテストマシンでのみ動作します。

これは、最初のウェブサイトの完全なHTMLスナップショットを生成するので、ヘッドレスブラウザのコードではなく、2番目のウェブサイトのJavaScriptコードでこれが奇妙なバグだと思っています、これはheisenbugなので、私は本当にこのすべてを引き起こしているのか分かりません。

どのようなアイデアやコメントをいただければ幸いです。ありがとうございました

Answer 1

DOM変更のポーリングではなく、ネットワークリクエストを監視するのはなぜですか？これは、より安全なヒューリスティックのように思えます。 X msのネットワークアクティビティがなく（保留中の要求がない場合）、ページは完全にロードされていると仮定します。