如何使用 robots.txt 禁止 Codeigniter 中的某些控制器
How to use robots.txt to disallow to some controller in Codeigniter
我对这个话题很陌生robots.txt。我已经研究了几个小时并尝试实施它。我有一个名为 login 和 view 的控制器。我想要的只是 Google 搜索以仅列出我的视图控制器而不是登录控制器。但是现在当我在 Google 中搜索我的网站时,它在查看之前显示登录。如何使用 robots.txt 从 Goolge 中的列表中删除登录信息?
很多关于robots.txt的信息你可以在那里找到:
http://www.robotstxt.org/robotstxt.html
简单示例:
User-agent: *
Disallow: /test/
使用此代码,所有用户代理都不允许索引“/test/”地址。阅读有关 robots txt 的信息或向我们展示您的代码。
我对这个话题很陌生robots.txt。我已经研究了几个小时并尝试实施它。我有一个名为 login 和 view 的控制器。我想要的只是 Google 搜索以仅列出我的视图控制器而不是登录控制器。但是现在当我在 Google 中搜索我的网站时,它在查看之前显示登录。如何使用 robots.txt 从 Goolge 中的列表中删除登录信息?
很多关于robots.txt的信息你可以在那里找到: http://www.robotstxt.org/robotstxt.html
简单示例:
User-agent: *
Disallow: /test/
使用此代码,所有用户代理都不允许索引“/test/”地址。阅读有关 robots txt 的信息或向我们展示您的代码。