如何使用robots.txt来禁止Codeigniter中的某些控制器


How to use robots.txt to disallow to some controller in Codeigniter

我对robots.txt这个主题还很陌生。我研究了几个小时,并尝试实现它。我有一个名为login和view的控制器。我只想在谷歌搜索中列出我的视图控制器,而不是登录控制器。但现在,当我在谷歌上搜索我的网站时,它显示的是在视图之前登录。如何使用robots.txt从Googlege中删除登录名?

关于robots.txt的许多信息您可以在那里找到:http://www.robotstxt.org/robotstxt.html

简单示例:

User-agent: *
Disallow: /test/

使用此代码,所有用户代理都不允许索引"/test/"地址。阅读robots txt或向我们展示您的代码。