Laravelのrobots.txt

Question

robots.txtファイルが一般的なロボットのtxtファイルのように動作するはずです。たとえば、「disallow/admin/*」と入力すると、ルートLaravelフォルダに置かれます。それはそれです。

このような感じですか？

Answer 1

このウェブサイトのアドレスは、公開ディレクトリに関連することを覚えておいてください。したがって robot.txtをlaravelで動作させるには、パブリックフォルダに配置する必要があります。

Answer 2

robot.txtは、検索ボットがウェブサイトのリソースを読み込んでクロールするために使用する特別なファイルです。

robot.txtは、ウェブサイトのルートにある必要があります。

ルートディレクトリはosからosに異なります。私はそれらのいくつかを与えています。あなたのサーバー管理者に相談することができます。

例：

/public_html 
/htdocs 
/html