Я должен сделать файл robots.txt для двух разных сайтов, но они оба находятся в одном корневом каталоге.Robots.txt для двух отдельных веб-сайтов, которые разделяют один и тот же корень
Они такие же разные, как google.com и yahoo.com, но оба они привязаны к одному и тому же месту, поэтому одно изменение влияет на обоих. Если вы ищете решение для создания одного файла роботов для обоих доменов, любая помощь будет принята с благодарностью.
Найдено этот другой ресурс, но я не уверен, если он будет применяться: Robots.txt for multiple domains
Он будет работать, если вы можете использовать переписывание модема apache. Если это динамический сайт, вы также можете маршрутизировать запрос для robots.txt на robots.jsp (например). –
Как я могу это сделать? Спасибо. –
Вы используете веб-сервер Apache? –