googlebot

0зной

1ответ

Если я создаю массив текстовых элементов динамически, он будет проиндексирован роботом Googlebot?

У меня есть некоторый текст, собственно 20+ куски текста большого и я добавить его в массив var translation = new Array(); translation [0] = "<p>English</p> Lorem ipsum dolor sit amet, consectetur ad

0зной

2ответ

Может ли crawlers получить доступ к каталогам «Отказаться от всех»

Привет, на моем сайте У меня есть основная папка, в которой есть конфиденциальные данные, в которых у меня есть файл htaccess с «Deny From All». Мой вопрос в том, может ли Google или какой-либо другой

0зной

1ответ

Zend require_once error в apache2 error.log

Я заметил некоторые проблемы в apache2 error.log. Мой сервер получит запрос от IP-адреса 66.249.72.182,66.249.78.76 (Googlebot ???), и в /var/log/apache2/error.log я есть записи: [error] [client 66.24

0зной

1ответ

Googlebot и Bingbot обход сайта DNN

У меня есть сайт DNN с более чем 20 000 страниц. Googlebot и Bingbot постоянно сканируют мой сайт. Когда я смотрю на свою sitelog я могу видеть, что Google и Бинг ползут мой сайт через PageId (наприме

0зной

1ответ

Как скрыть сайт Drupal от Google?

У меня есть сайт, и я использую Drupal для CMS. т.е. я пишу статьи в mysite.com/drupal/, но я их показываю в mysite.com/show_article.php?article_id=x&article_name=y (фактически mysite.com/article/x/y

4зной

1ответ

Почему Google Crawling не существует файла CSS?

Google Bot Crawler последовательно пытается обходить CSS-файлы, которые не существуют на моем сайте в процессе производства. Он просит: http://www.mywebsite.com/assets/index-d45678283d4ab9905c35381848

0зной

2ответ

Проблемы с пониманием блокировки некоторых URL-адресов на robot.txt

Проблема в этом. У меня есть несколько URL-адресов в системе у меня есть, что есть эта картина http://foo-editable.mydomain.com/menu1/option2 http://bar-editable.mydomain.com/menu3/option1 Я хотел