Мне просто интересно, должен ли файл robots.txt работать как обычные файлы txt robots. Таким образом, вы печатаете, например, «disallow/admin/*» помещаете его в корневую папку Laravel и все.robots.txt в Laravel
Это так?
Помните, что этот адрес веб-сайта имеет отношение к публичному реж. Итак, , если вы хотите robot.txt для работы в laravel, его необходимо разместить в общей папке.
robot.txt - специальный файл, используемый поисковыми роботами для чтения и сканирования ресурсов веб-сайта.
robot.txt должен быть в корне сайта.
Корневой каталог отличается от os to os. Я даю им немного. Лучше вы можете проконсультироваться с администратором сервера.
Пример:
/public_html
/htdocs
/html