google index - будет ли Google индексировать мои журналы?

Question

У меня есть несколько файлов журнала txt, где я печатаю некоторые важные действия для моего сайта. Эти файлы НЕ ссылаются ни на одну ссылку на моем сайте, так что только я знаю URL (они содержат текущую дату в filname, поэтому у меня есть один на каждый день).

Вопрос: будет ли индексировать эти файлы Google? Я думаю, что google индексирует только страницы, на которых URL-адреса находятся на сайте.

Можете ли вы подтвердить мое предположение? Я просто не хочу, чтобы другие находили ссылку из Google и т. Д. :)

Answer 1

Теоретически они не должны. Если они не связаны нигде, они не смогут их найти. Однако я не уверен, может ли материал проникнуть в индекс за счет того, что панель инструментов Google установлена. Определенно, у меня появились неожиданные вещи в поисковых системах. Единственным безопасным способом было бы защитить пароль паролем.

Answer 2

Google не может индексировать страницы, на которых он не знает, что они существуют, поэтому он не будет индексировать их, если только кто-то не размещает URL-адрес в Google или не размещает их на каком-либо веб-сайте.

Если вы хотите быть уверенным, просто запретите индексирование файлов (в /robots.txt).

Answer 3

Лучшей практикой является использование файла robots.txt, чтобы предотвратить искажение искателей Google, которые вы не хотите отображать.

Это описание с помощью Инструментов Google для веб-мастеров является очень полезным и ведет вас через процесс создания такого файла:

https://support.google.com/webmasters/answer/6062608

редактирования: Как было отмечено в комментариях нет никакой гарантии, что robots.txt используется, поэтому защита паролем папок также является хорошей идеей.