検索エンジンの重複コンテンツを解決するにはどうすればよいですか？

Question

私は2つのウェブサイトを持っています：Site1.comとSite2.com。

Site1.comには、a.htmとb.htmという2つのページがあります。 Site2.comには、a.htm、b.htm、およびc.htmという3つのページがあります。

ページa.htmとb.htmは2つのサイトで重複しています。

私は検索エンジンでSite1からa.htmとb.htm、Site2からc.htmを索引付けします。どのようにしてこの嗜好を指定するのですか？ 可能であれば、ページレベルで自分の好みを指定する必要はありません（すべてのページを編集する必要があります）。

ありがとうございました。

Answer 1

各サーバーのルートにrobots.txtファイルを作成し、インデックスを付けるページを指定します。サイト2上の例えば

、：

User-agent: * 
Disallow: /a.htm 
Disallow: /b.htm 

Answer 2

「このフォームに記入する」タイプのコントロールを提供する検索エンジンはありません。

あなたの二つのオプション：

1）NOTインデックスSITE1上のページが
2）301を使用するようにクローラを伝えるためにrobots.txtを使用して、「恒久的に移動」ではなくSITE1のサイト2を見に行くためにクローラを伝えるためにリダイレクトします。