1
Где поместить файл robots.txt в codeigniter.где положить robots.txt для CodeIgniter
Я не знаю, как разместить папку.
User-agent: *
Disallow:/
Где поместить файл robots.txt в codeigniter.где положить robots.txt для CodeIgniter
Я не знаю, как разместить папку.
User-agent: *
Disallow:/
Файл robots.txt ДОЛЖЕН быть помещен в корень документа узла. Он не будет работать в других местах.
Если ваш хост является example.com, он должен быть доступен по адресу http://example.com/robots.txt.