if文と検索エンジンのスパイダーを使ってリダイレクトするphp経由で伝える？

Question

私のウェブサイトのほとんどのページはユーザーがアクセスしています。ユーザーではなく、ログインしていない場合は、ページにアクセスできません。

検索エンジンのスパイダーは、ログインしていないので、これらのユーザーページを一覧表示、クロール、インデックス登録できますか？

このシステムを使用すると、より良いインデックス作成が可能になりますか？

Answer 1

ユーザー以外の関連コンテンツがあり、検索エンジンでそれをクロールする場合は、はでログインせずにアクセスできます。

Answer 2

スパイダーはログインしないため、保護されていないページは表示されません。また、ログインしていない訪問者ではなく、スパイダーにそのページを表示させないようにする必要があります。検索エンジンは、サイトのペナルティを課すか、インデックスの作成を中止します。

ただし、最初のX単語のように、ログインしていないユーザーにはページの抜粋を表示できます。ページをクロールするスパイダーはそのテキストを読むことができます。