На сегодняшний день Google уже может индексировать страницы, использующие JavaScript и AJAX. Поэтому Мюллер посоветовал вебмастерам не полагаться на эти технологии как способ скрытия ссылок от поисковика. При этом также не стоит ожидать, что такие страницы будут со 100% вероятностью проиндексированы.
«Мы не всегда распознаём JavaScript и AJAX, но с каждым днём наши возможности расширяются. По этой причине я бы не полагался на то, что Google «забудет» просканировать JavaScript», - отметил Джон Мюллер.
Прослушать его ответ можно, начиная с 14:10 минуты видеозаписи:
Напомним, что в октябре 2015 года Google отозвал рекомендации по сканированию AJAX, изложенные в соответствующем руководстве. Это руководство было опубликовано в 2009 году и призвано сделать AJAX-страницы видимыми для поисковых роботов. На тот момент системы Google не могли распознавать и отображать страницы, использующие JavaScript. В настоящее время эта ситуация изменилась. Теперь, чтобы Googlebot правильно распознавал содержание сайта, вебмастерам рекомендуется открыть ему доступ ко всем ресурсам, включая файлы CSS и JavaScript.
С часто задаваемыми вопросами по изменениям в сканировании AJAX можно ознакомиться здесь.