Google AdSenseのボットのアルゴリズムと動作

Question

Google AdSenseのボットのアルゴリズムとウェブサイトの動作に興味があります。私はAdSenseで動作しませんでしたし、私はアカウントを持っていません。だから私は理解するためにあなたの助けが必要です：

1）時々Gbotは、Webサイトからすべてのページをダウンロードします。私は正しい？

2）Gbotは動的コンテンツ（ajaxによって読み込まれている）を理解していません。だから私は静的なコンテンツを生成し、HTMLページ内にそれを返す必要があり、このページはすべてのユーザーとGbotのために同じ内容を表示する必要がありますか？

3）（1）と（2）のために、ルートパスhttp://example.comと「メイン」ウィジェットを使用することはできません。ユニークなページを生成する必要があります（例：http://example.com/thread?id=101）。

4）Gbotはキーワードを取得するためのページ（1）をダウンロードし、キー/値（キーはページパス、値はタグクラウド）などでこれらの情報を保存します。私は正しい？

5）ユーザーがブラウザでWebサイトを開いたとき。統合されたhtml AdSenseコードでJavaScriptが読み込まれます。私は「グーグル・グーグル」と理解していますが、このJavaScriptはページをインデックス化しませんが、Googleのサーバーに（パラメータ・キー== page_pathで）コールし、適切な広告リンクを取得します。次に、この広告リンクをフレームに表示します。それは正しい行動ですか？たぶんJavaScriptがページのコンテンツのローカルインデックスを作成することはありますか？

6）GbotとAdSenseのJavaScriptがCookieとどのように機能しますか？私は、AdSenseが適切な広告リンクを表示するためにCookieを使用できることを理解しています。それが正しい場合は、いくつかのユースケースを教えてください）

"真の"アルゴリズムはGoogleのエンジニアのみが知っています。しかし、AdSenseやAdSenseのhtml/javascriptの経験があります。 ）私のビジョンを修正してください;

ありがとうございました！

P.S.この質問は私のために非常に重要です。それは楽しみのためのいくつかの質問ではありません！だから、それを閉じないでください。）

Answer 1

1）はいGooglebotがページにアクセスし、それがリンクを介してページを知っている場合は、XMLSitemapsは、Google +1ことができるかどうかなど

2）をGooglebotが今になりますAJAX/XHRはAJAXコンテンツの理解を求めています（http://googlewebmastercentral.blogspot.com/2011/11/get-post-and-safely-surfacing-more-of.html）。

はい、ユーザーと同じコンテンツをGooglebotに表示する必要があります。そうしないと、ガイドラインに反して隠蔽が発生する可能性があります。

3）この質問は明確ではありません。しかし、基本的には、URLを変更することをお勧めします.Googleはそのコンテンツを個別にインデックスに登録する方法を知っているからです。 AJAXを使用している場合は、提案したようなパーマリンクを使用するか、HTML5 popstateを使用することができます。

4）はいGoogleはページ上の単語のインデックスを作成します。私は彼らがキー/値のペアとしてそれを保存しているかどうかはわかりません。 Big Table（http://labs.google.com/papers/bigtable.html）をまだ使用しているかどうかはわかりませんが、逆インデックスを格納するBig Tableなどのシステムを使用している可能性があります。

5）AdsenseコードはJavascriptに埋め込まれています... Googleがこれまでに見たことのない新しいウェブページの場合、サイトに関する情報やアンカーによる情報に基づいて最も関連性の高い広告を配信しようとしますそのページを指すリンクのテキスト。しかし、ページの内容をより正確に理解するために、GoogleはあなたのページをクロールするためのAdSense固有のボットを送信します...あなたが最初にページを読み込むとすぐに時間。従来のGooglebotとは異なるユーザーエージェントを使用しています.Googleからすべてのユーザーエージェントを見つけることができます（http://www.google.com/support/webmasters/bin/answer.py?answer=1061943）

6）GoogleのクローラはCookieを受け入れず、サーバーにCookieを渡しません。これは、クッキーやセッションを維持することを非常に困難にするGoogleクローラーの大量に分布する性質と関係しています。