Google рассказал о двух факторах, влияющих на сканирование сайта роботом GoogleBot


1 октября на ежегодной конференции SMX East 2014 аналитик Google Гэри Илш (Gary Illyes) рассказал аудитории о двух технических факторах сайта, которые являются сигналами сканирования для Google. С их помощью он определяет, когда роботу GoogleBot следует замедлить или остановить сканирование сайта.

Гэри Илш

К этим сигналам относятся:

• Время соединения (Connect Time)

Google смотрит на длительность установления соединения с сервером или веб-страницей. Если она становится все больше, он отступит и замедлит или остановит сканирование страниц сайта. Чтобы в конечном итоге не привести к остановке сервера, Google использует время соединения как фактор сканирования.

• Коды состояния HTTP (HTTP Status Codes)

Google также остановит или замедлит сканирование, если получит коды состояния сервера в диапазоне 5хх. Коды 5xx выделены под случаи неудачного выполнения операции по вине сервера. Полный список кодов можно посмотреть в Wikipedia. По словам Илльеса, когда Google видит эти коды, он отступает, чтобы не вызвать еще больше проблем для сервера.

В обоих случаях GoogleBot вернется к этому интернет-ресурсу позже, но отступит опять, если увидит указанные два сигнала, чтобы не вызвать еще больше проблем для пользователей, пытающихся зайти на сайт.

Google может обновить Penguin уже на следующей неделе

Аналитик Google Гэри Илш (Gary Illyes) во время сессии вопросов и ответов оптимизаторов и представителей поисковых систем на Search Marketing Expo East 2014 сообщил, что Google...

Google в Германии сократит новостной контент до заголовков

Поисковый гигант Google решил прекратить показ фрагментов новостей и уменьшенных изображений членов немецкого консорциума VG Media

Wizard.Sape обновил интерфейс, разделив инструменты на активности

Команда сервиса Wizard.Sape сообщила об обновлении интерфейса и разделении всех существующих элементов на активности: «Ссылки» (покупка арендных ссылок и вечных) и «Соц

Google выпустил обновление алгоритма Panda 4.1

Представитель Google UK Пьер Фар (Pierre Far) на своей странице Google+ сообщил о выходе обновления алгоритма Panda: «Вышло обновление алгоритма Panda Ранее на этой неделе мы...

Всего 5% американских взрослых пользователей интернета покупают в социальных сетях

Только 5% американских взрослых пользователей интернета совершили покупку в социальной сети, например Facebook, Twitter или Pinterest

Yahoo завершает работу Yahoo Education, Qwiki и Directory

Yahoo перенаправляет ресурсы с непопулярных сервисов на востребованные и «согласующиеся с видением» компании