Скрыть сайт от видимости в поисковых системах

Question

Я сделал веб-портал для внутреннего использования офиса. Поскольку это внутреннее приложение, нам не нужно открывать его на публике, у вас уже есть система входа в систему. Поскольку нам нужно подключить все наши офисы по всей стране, мы должны поставить это онлайн.

У меня вопрос, как скрыть этот сайт от поисковой системы. Слышал, что файл «.htaccess» выполнит эту работу. Может ли кто-нибудь проконсультироваться?

Заранее спасибо

Answer 1

Если у вас есть система рабочего входа в систему, Seach двигатели не будут в состоянии видеть ничего, кроме страницы посадки/входа.

.htaccess позволит вам использовать защиту паролей Apache, но если у вас уже есть система входа в систему, это не поможет вам.

Вы должны создать файл robots.txt, если хотите, чтобы поисковые системы с хорошим поведением игнорировали всю вашу страницу. Содержимое, подобное приведенному в файле robots.txt вашего корневого сайта, заставит веб-сканеров игнорировать весь ваш сайт.

User-agent: * 
Disallow:/