Может ли я скрыть определенные папки из гусеничных со специальными символами, такими как:Disallow определенных папок в robots.txt с групповыми символами
User-agent: *
Disallow: /system/
Disallow: /v*
Я хочу, чтобы скрыть все папки начинается с «V» характером. Это будет работать так?
Для этого вам не нужны подстановочные знаки. Ваш пример будет работать, но он будет работать так же хорошо без шаблона. Трейлинг подстановочные знаки ничего полезного не делают.
Например, это:
Disallow: /x
означает: «Блок любой путь, который начинается с„/ х“, за которым следует ноль или более символов.»
А это:
Disallow: /x*
означает: «Блок любой путь, который начинается с„/ х“, за которой следует ноль или более символов, за которым следует ноль или более символов.»
Это избыточно, и он блокирует все те же вещи, что и первый. Единственное практическое отличие заключается в том, что вторая версия не сможет работать с искателями, которые не поддерживают подстановочные знаки.