Два фактора, влияющие на сканирование сайта роботом GoogleBot

Автор Тема: Два фактора, влияющие на сканирование сайта роботом GoogleBot  (Прочитано 1034 раз)

Оффлайн ВикторияИАвтор темы

  • Бизнес оценка: (0)
  • КМС
  • *****
  • СПАСИБО: 3063
  • Сообщений: 4112
  • Карма: 191
  • и да прибудет с Вами Сила.
  • Награды Автор самой интересной темы Более одной тысячи спасибо КМС поисковой оптимизации
    • Заказ автобуса в Одессе
  • Доп. информация
    • Бизнес оценка: (0)
    • СПАСИБО: 3063
    • Сообщений: 4112
    • Карма: 191
    • и да прибудет с Вами Сила.
    • Награды Автор самой интересной темы Более одной тысячи спасибо КМС поисковой оптимизации
      • Заказ автобуса в Одессе
1 октября на ежегодной конференции SMX East 2014 аналитик Google Гэри Илш (Gary Illyes) рассказал аудитории о двух технических факторах сайта, которые являются сигналами сканирования для Google. С их помощью он определяет, когда роботу GoogleBot следует замедлить или остановить сканирование сайта.

К этим сигналам относятся:

• Время соединения (Connect Time)

Google смотрит на длительность установления соединения с сервером или веб-страницей. Если она становится все больше, он отступит и замедлит или остановит сканирование страниц сайта. Чтобы в конечном итоге не привести к остановке сервера, Google использует время соединения как фактор сканирования.

• Коды состояния HTTP (HTTP Status Codes)

Google также остановит или замедлит сканирование, если получит коды состояния сервера в диапазоне 5хх. Коды 5xx выделены под случаи неудачного выполнения операции по вине сервера. Полный список кодов можно посмотреть в Wikipedia. По словам Илльеса, когда Google видит эти коды, он отступает, чтобы не вызвать еще больше проблем для сервера.

В обоих случаях GoogleBot вернется к этому интернет-ресурсу позже, но отступит опять, если увидит указанные два сигнала, чтобы не вызвать еще больше проблем для пользователей, пытающихся зайти на сайт.


 

Похожие темы

  Тема / Автор Ответов Последний ответ
3 Ответов
3302 Просмотров
Последний ответ 01-04-2012, 06:35:58
от Юрка Гагарин
5 Ответов
1708 Просмотров
Последний ответ 08-06-2012, 23:24:53
от snegovik
13 Ответов
5027 Просмотров
Последний ответ 20-09-2012, 20:28:05
от lipatoff
1 Ответов
2808 Просмотров
Последний ответ 14-02-2013, 09:59:31
от eqoist
0 Ответов
1024 Просмотров
Последний ответ 01-04-2013, 13:12:07
от belamiko