私は以下のようなrobots.txtを持っていますが、Googleはまだ自分のドメインをインデックスに登録しています。基本的に彼らはmydomain.comインデックス化が、Googleはとにかく自分のドメインをインデックスに登録しましたか?
UserAgent: *
Disallow:/
私は意味がどのように私は戻って、さらに私は、ドメインのルートだと思った/
よりも行くことができますmydomain.com/any_pageていませんでしたか?
このドメインは処理が容易なので、Googleや他の検索エンジンには分かりません。
私はこれを考えましたが、とにかく1週間か2週間でGoogleにサイトを提供する予定です。私はちょうどそれらをブロックする一時的な措置を探していたが、私はタイトル、ヘッダ、内容を混乱させる –