検索エンジンのインデックスを防止する方法は、製品ページでのみですか？

すべての商品ページをインデックスしないようにします。 Googleや他の検索エンジンではインデックスを作成しないでください。私は唯一のサイト情報はrobots.txtのためのドキュメントを読んでくださいサイトとコードのルートに次の検索エンジンのインデックスを防止する方法は、製品ページでのみですか？

User-agent: * 
Disallow: /products/*

をrobots.txtの作成

出典

2017-08-16 Bipul Roy

インデックスに登録できないページでは、 ''を使用する必要があります。 – Naruto

ダイナミックシステムで@Narutoを使用する場合は、ページは動的です。 robots.textコード –

など、カテゴリページをランク付けしたい、* - 任意のシンボルを意味します。

あなたは http://tools.seobook.com/robots-txt/generator/

またはそれ以上のプロ雇うように発電機を使用しようとすることができます。

出典

2017-08-16 09:27:24 Dimash

で問題を解決できます。1）ファイルは 'robot.txt'ではなく' robots.txt'と呼ばれます。 2） '/'/'/'の後ろの '*'は必要ありません。なぜなら、 'Disallow'では常にURLパスの*始まり*であるからです。 3）robots.txtは必ずしもインデックスを作成するのではなく、クロールを防止します。 – unor

検索エンジンのインデックスを防止する方法は、製品ページでのみですか？

答えて

関連する問題