Добавление файла robots.txt в nginx.conf

Question

Я пытаюсь добавить в файл robots.txt файл, чтобы остановить индексирование нежелательных веб-страниц. Большинство всего, что я нашел, касается файлов Cpanel/.htaccess - apache. Я использую nginx в качестве прокси-сервера и предполагаю, что я должен добавить его в файл nginx.conf. Где я могу его добавить? Ниже мой robots.txt, как сейчас. Я хочу добавить.

Disallow: /retailer/inv/ 

Будет ли это блокировать все страницы инвентаризации розничной торговли?

Sitemap: http://www.example.com/sitemap.xml 
User-agent: * 
Disallow: /trade/ 
Disallow: /email/ 
Disallow: /saved/ 
Disallow: /print/ 

Я новичок, но стараюсь учиться на ходу. Спасибо заранее.

Answer 1

robots.txt проверяется сканерами (включая поисковые системы), а не веб-сервером. Поэтому не имеет значения, используете ли вы Apache, Nginx или любой другой сервер; до тех пор, пока файл присутствует и общедоступен.