Yahoo обновила Slurp

    6

    Компания Yahoo сообщила об обновлении поискового краулера Slurp до версии 3.0. Для этого апдейта будут отменены старые IP адреса краулера и введены новые, в связи с чем все скрипты, связанные с IP-адресами, должны быть пересмотрены владельцами сайтов.

    Система карулинга поисковой системы Yahoo отличается сложностью: в ней существует до 11 независимых краулеров и 5 юзер агентов.