Я совершенно новый. Это может показаться глупым для вас, ребята, но я застрял с ним. На сайте я получаю файл robots.txt. Но когда я смотрю на сервер, нет файла robots.txt.Я не могу найти файл robots.txt на сервере, но он отображается в url
Но это может быть доступ с URL: goodearthtermiteandpest.com/robots.txt
Пожалуйста, помогите мне, почему это происходит, и где этот файл на самом деле.
Благодаря
Файл robots.txt ведется автоматически генерируются Wordpress, в зависимости от ваших "Разрешить поисковик установки:
https://wordpress.org/support/topic/how-to-enable-site-for-search-engine
Есть также плагины для редактирования файла, если вы необходимо:
https://wordpress.org/plugins/wp-robots-txt/
Подробнее:
https://wordpress.org/support/topic/how-to-edit-my-robotstxt-file
Может быть этот файл порождается некоторым сео плагин. если нет, то это скрытый файл в вашем корневом каталоге wordpress.
tickmark затем "скрытые файлы шоу", когда вы открываете файловый менеджер: экран проверки выстрелили