Google не рекомендует закрывать страницу в robots.txt, если на ней уже есть атрибут noindex

14

Специалист отдела качества поиска Google по работе с вебмастерами Джон Мюллер (John Mueller) отметил, что не следует закрывать страницу в robots.txt, если на ней уже есть атрибут noindex.

brick-Google-1900px--1441802297.jpg

Макс Прин (Max Prin) опубликовал в Twitter сообщение следующего содержания: «Протестировано: нет необходимости прописывать директиву disallow в robot.txt, если тег noindex уже используется»:

Джон Мюллер согласился, что не стоит дополнительно закрывать страницу от индексации в robot.txt:

Таким образом, если на странице есть тег meta name="robots" content="noindex", то нет смысла эту страницу через disallow закрывать ещё и в robots.txt.

Кроме того, об этом говорится и в Справочном центре Search Console: «Google не рекомендует закрывать страницу в robots.txt, если на ней уже есть атрибут noindex. Такая страница не будет отображаться в результатах поиска».

Редактор-переводчик. Специализируется на западном интернет-маркетинге и SEO. Освещает события в этой области с 2014 года.