Как использовать robots.txt для запрета на некоторый контроллер в Codeigniter

Question

Я довольно новичок в теме robots.txt. Я смотрел на это несколько часов и пытался выполнить его. У меня есть контроллер с именем login и view. Все, что я хочу, это поиск в Google, чтобы отображать контроллер моего представления, а не контроллер входа. Но теперь, когда я ищу свой сайт в Google, он показывает логин перед представлением. Как удалить вход из списка в Goolge с помощью robots.txt?

Answer 1

Много информации о robots.txt Вы можете найти здесь: http://www.robotstxt.org/robotstxt.html

Простой пример:

User-agent: * 
Disallow: /test/ 

С помощью этого кода, все пользовательские агенты запрещены к индексу «тест//» адрес , Читайте о роботах txt или покажите нам свой код.