Google Master Tool: 如何在 robots.txt 中允许外部链接

Google Master Tool: How allow external links in robots.txt

我在 google 渲染时遇到问题。

Googlebot 无法获取此页面的所有资源。因为被自己屏蔽了googlerobots.txt

这是一个外部示例 link。 https://www.google.com/maps/vt?

https://www.google.com/robots.txt

我可以允许在我的网站上使用我自己的 robots.txt 吗?这样我就可以避免错误了。

答案是:不可能。如果 Google 不想在其 robots.txt 中索引此类页面,那么您不能强制 Google 这样做。