Google Sitemap и Robots.txt Выпуск

Question

У нас есть карта сайта на нашем сайте, http://www.gamezebo.com/sitemap.xml

Некоторые из URLs в карте сайта, в настоящее время сообщается в вебмастеру центре, как блокируется нашим robots.txt см, gamezebo.com/robots.txt ! Хотя эти URL не запрещены в Robots.txt. Существуют и другие такие URL-адреса, например, gamezebo.com/gamelinks присутствует в нашей карте сайта, но сообщается как «URL-адрес, ограниченный robots.txt».

Также у меня есть результат синтаксического анализа в Центре веб-мастеров, который гласит: «Строка 21: Задержка сканирования: 10 Правило игнорируется роботом Googlebot». Что это значит?

Я ценю вашу помощь,

Спасибо.

Answer 1

задержка ползать не является фактической спецификации в robots.txt формате, так что строка будет игнорироваться ... Вы можете установить скорость пользовательского сканирования, если вы хотите, чтобы в google webmaster tools в Настройки> скорость сканирования