2016-06-15 2 views
0

txt тестер не работает в моем случае. У меня есть строки ниже в файле robots.txt.Google Bot Robots.txt тестер не работает

Но в тестере, если я тестирую wp-admin, показ инструментов разрешен. Я не знаю почему? Пожалуйста, помогите мне, как запретить WP-администратора

User-Agent: Googlebot 
Allow: *.css* 
Allow: *.js* 
Allow: /*.jpg 
Allow: /*.gif 
Allow: /*.png 

User-agent: * 
Disallow: /cgi-bin 
Disallow: /wp-admin 
Disallow: /wp-includes 
Disallow: /wp-content/plugins 
Disallow: /wp-content/cache 
Disallow: /wp-content/themes 
Disallow: /category 
Disallow: /tag 
Disallow: /page 
Disallow: /author 
Disallow: /trackback 
Disallow: /*trackback 
Disallow: /*trackback* 
Disallow: /*/trackback 
Disallow: /*?* 
Disallow: /*.html/$ 
Disallow: /*feed* 

# Google Image 
User-agent: Googlebot-Image 
Disallow: 
Allow: /* 

# Google AdSense 
User-agent: Mediapartners-Google* 
Disallow: 
Allow: /* 
+0

Какой путь вы проверили точно? 'wp-admin','/wp-admin', '/ wp-admin /'? – unor

ответ

0

Если вы удалите слэш, вы будете проходить, или если вы поставите страницу после Wp-администратора в тестере, вы бы также видеть ваше правило (блокировать ботов), как /wp-admin/admin.php

User-agent: * 
Disallow: /cgi-bin/ 
Disallow: /wp-admin 
Disallow: /recommended/ 
Disallow: /comments/feed/ 
Disallow: /trackback/ 
Disallow: /index.php 
Disallow: /xmlrpc.php 
+0

Мне позволено в тесте. Значит, его средние поисковые роботы правы? – JGK

+0

Какую цель? –

+0

Я хочу запретить wp-admin и так далее, упомянутые в вопросах. – JGK

Смежные вопросы