-1
robots.txtで自分のサイトの検索リンクを許可しないようにします。ロボットでウェブサイト上の検索リンクを無効にするtxt
私は検索が送信ボタンをクリックした後、私のURLは次のようになります。私は私のrobots.txtファイルにこのURLアドレスを書くことができますどのように
example.com/searching?k=something
？
私のrobots.txtファイルは、次のようになります。あなたがちょうどあなたのrobots.txtファイルに別の除外を追加し、/searchingから始まるサイト上のすべてのURLをクロール対応のロボットを許可しないようにしたい場合は
User-agent: *
Disallow: /admin_folder
Sitemap: https://www.domain-address.com/sitemap.xml
Host: www.domain-address.hu
function search_k()
{
if($.trim($('#country_id').val()) != "")
{
//document.location = http_host+'/kereses.php?k='+$('#country_id').val();
var KeyWord = encodeURIComponent($('#country_id').val()).replace(/%20/g, '+');
document.location = http_host+'/searching?k='+KeyWord;
}
return false;
}
なぜアスタリスクを使用しないのですか？ 'Disallow/searchig/* ' – vatavale
' query part'を無効にすることもできます。 https://stackoverflow.com/questions/1495363/how-to-disallow-all-dynamic-urls-robots-txt?rq=1 – vatavale
あなたは何を試しましたか？あなたは既にrobots.txtを持っているので、どのように動作するのか理解していると思いますか？ （これらのURLを禁止する必要があるかどうかを尋ねる質問は削除しましたが、これはSEOの質問ですが、ここでは話題にはなりませんが、[webmasters.se]のトピックにあります。 – unor