Robotstxt Google 搜索结果
Robotstxt Google Searchresults
我的搜索结果索引了 Google 上的所有网站。我只想索引主页而不是 /nl/、/en/ 和 /fr/
如何在我的 robots.txt 中防止这种情况？
我用过
Disallow: /nl/
Disallow: /fr/
Disallow: /en/
但是我的站点地图与 URL www.eikhoeve.be/nl/sitemap.xml 有什么关系？我怎么才能允许我的 Google 网站管理员工具使用这个呢？
您可以使用 Allow 关键字来访问不允许目录中的 URL。
Allow: /nl/sitemap.xml
Disallow: /nl/
我的搜索结果索引了 Google 上的所有网站。我只想索引主页而不是 /nl/、/en/ 和 /fr/ 如何在我的 robots.txt 中防止这种情况？
我用过
Disallow: /nl/
Disallow: /fr/
Disallow: /en/
但是我的站点地图与 URL www.eikhoeve.be/nl/sitemap.xml 有什么关系？我怎么才能允许我的 Google 网站管理员工具使用这个呢？
您可以使用 Allow 关键字来访问不允许目录中的 URL。
Allow: /nl/sitemap.xml
Disallow: /nl/