2012-05-09 2 views
0

robot.txtファイルでは、URLは/custompages/*で、Googleボットは「/ custompages /」と一致するページをクロールしないでください。URLを指定した後でもrobot.txtファイルにこれが間違っていますか?

しかし、ウェブマスターを調べると、それらのリンクからのエラーメッセージが引き続き表示されます。

User-agent: *   
Disallow: /search/application/* 
Disallow: /custompages/* 

上記は、私のrobot.txtファイルです。ウェブマスターに

私が間違っているが起こっている可能性があるURL

custompages/savesearch?alid=9161

ためGooglebot couldn't access the contents of this URL because the server had an internal error when trying to process the request. These errors tend to be with the server itself, not with the request. を見ることができますか..?

答えて

0
Disallow: /search/application/ 
Disallow: /custompages/ 

十分ですが、*記号は必要ありません。

関連する問題