Запретить правило в файле robots

Question

Disallow:/*?

Для веб-сайта, который имеет это в файле robots.txt. Я предполагаю, что все будет заблокировано до «.

Это правда? Все уровни/папка перед /? ?

Answer 1

Это правило блокирует каждый URL-адрес, содержащий строку запроса. Поэтому он блокирует http://www.example.com/foo.html?name=bar, но он не будет блокировать http://www.example.com/foo.html.