Я создаю файл robots.txt. Но я немного не уверен в том, как запретить Googlebot-Image. Я хочу разрешить бот Google сканировать мой сайт, за исключением запрета, который я сделал ниже. Это то, что я сделал:запретить некоторые папки с изображениями
User-agent: Googlebot
Disallow:
Disallow: /courses/
Disallow: /portfolio/portfolio-template.php/
User-agent: Googlebot-Image
Disallow:
/images/graphics/erhvervserfaring/
/images/graphics/uddannelse/
sitemap: http://www.example.com/sitemap.xml
Если пользователь-агент: Googlebot
и User-agent: Googlebot-Image
быть записаны вместе, так что это вместо ?:
User-Agent: Googlebot-Image User-Agent: Googlebot Disallow:
Disallow: /courses/
/portfolio/portfolio-template.php/
/images/graphics/erhvervserfaring/
/images/graphics/uddannelse/
Почему у меня есть минус для этого вопроса? –