Googleのような検索エンジンからページを隠す（Facebookのセキュリティ設定のような）

Question

私はasp.net 2010を使用していますが、Facebookのセキュリティと同様に検索エンジンから特定のページを完全に隠す方法を知りたいのですが設定が設定されています（たとえば、自分の本名を検索すると、fbページがGoogleに表示されます）。

Answer 1

使用robots.txt

余分な安全のためには、ユーザーエージェント文字列を解析することができ、それbelongs to a crawler場合は、空のページを返します。

Answer 2

ロボットテキストの助けを借りて、特定のページを検索エンジンから隠すことができます。検索エンジンのスパイダーに、あなたのサイトのどのWebページを索引付けし、どのWebページを無視するかを指示します。:)

Answer 3

セキュリティ対策の場合はrobots.txtを使用しないでください。特定のページを非表示にしたい場合、これは攻撃者にあなたが隠そうとしていることを伝えます。