В официальном блоге Google появилось сообщение о том, что корпорация решила отказаться от робота-индексатора новостного контента Googlebot-News. Начиная с 25 августа 2011 года, все новости в поисковике будут индексироваться при помощи алгоритма общей индексации ресурсов Googlebot.
При этом, команда Google утверждает, что издателям не о чем беспокоиться: те, кто не желает открывать контент для индексации, как и прежде, могут запретить индексацию Googlebot-News в файле robots.txt или, используя метатег robots. Googlebot, также как и его предшественник Googlebot-News учтет запрет индексации новостного контента, прописанный данным образом.
Кроме того, в Google webmaster tools издатели, как и раньше, смогут обнаружить записи об ошибках страниц индексации отдельно для новостей.
Подробное руководство по использованию протоколов для Google News можно найти здесь. Кроме того, издатели новостного контента могут обратиться в службу поддержки Google News Support Team.
Заметим, что далеко не все отраслевые специалисты воодушевлены нововведением. Так, по мнению ведущих экспертов из Search Engine Land, отказ от Googlebot-News можно рассматривать как откат в прошлое, когда робот Googlebot индексировал и сайты интернета и новостной контент в общем поиске.