Google 机器人 Robots.txt 测试器不工作

Question

txt 测试器不适用于我的情况。我在 robots.txt.

中有以下几行

但是在测试器中，如果我测试 wp-admin，则显示允许的工具。我不知道为什么？请帮助我如何禁止 wp-admin

 User-Agent: Googlebot
Allow: *.css*
Allow: *.js*
Allow: /*.jpg
Allow: /*.gif
Allow: /*.png

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /category
Disallow: /tag
Disallow: /page
Disallow: /author
Disallow: /trackback
Disallow: /*trackback
Disallow: /*trackback*
Disallow: /*/trackback
Disallow: /*?*
Disallow: /*.html/$
Disallow: /*feed*

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
Disallow:
Allow: /*

Answer 1

如果你删除尾部的斜线，你就会通过，或者如果你在测试器中的 wp-admin 之后放置一个页面，你也会看到你的规则会通过（阻止机器人），比如 /wp-admin/admin.php

User-agent:  *
Disallow: /cgi-bin/
Disallow: /wp-admin
Disallow: /recommended/
Disallow: /comments/feed/
Disallow: /trackback/
Disallow: /index.php
Disallow: /xmlrpc.php

Google 机器人 Robots.txt 测试器不工作

Google Bot Robots.txt tester not working

wordpress

robots.txt

googlebot