Наверх
8 800 350 55 01
+7 (495) 118-22-22
/
/
Search Console просит удалить тег noindex из файла robots.txt
В тренде

Search Console просит удалить тег noindex из файла robots.txt

02.08.2019 Время прочтения: 1 минута

Западные SEO-специалисты стали получать письма от Google Search Console с напоминанием удалить тег noindex из файла robots.txt. Об этом сообщает издание Search Engine Roundtable.

Письма от google с напоминанеим удалить тег noindex и файла robots.txt

Источник изображения: seroundtable.com

В письме владельцу сайта сообщается, что в файле robots.txt его сайта содержится запрещенный тег noindex. Google не поддерживал использование этого тега, а с 1 сентября 2019 это правило и вовсе перестанет работать.

Некоторые веб-мастера получили уведомление несмотря на то, что удалили все теги noindex еще несколько недель назад.

Комментарий SEO-эксперта:

«В практике нашей компании тег noindex никогда не использовался в файлах robots.txt, а применялся в коде страниц для исключения из индексирования и имел такой вид :<meta name="robots" content="noindex">.

Но этот тег уже устарел и на практике давно не используется, так как в последнее время работал 50/50. Веб-мастерам, использующим каким-либо образом тег noindex в robots.txt, рекомендуется прислушаться к сообщениям Google и устранить устаревшее правило.

Технически файл robots.txt «показывает» роботу-пауку, что сканировать, а что нет. При этом все же есть вероятность попадания закрытых страниц в индекс поисковых систем.

Вспомним, какие директивы используются в файле robots.txt:

  • User-agent*: указывает, для какого поискового робота перечислены правила;
  • Allow: разрешает обходить и индексировать указанную директорию;
  • Disallow: запрещает обходить и индексировать указанную директорию;
  • Sitemap: указывает местонахождение файла sitemap.xml;
  • Clean-param: означает, что URL содержит параметры и индексировать их не нужно;
  • Crawl-delay: устанавливает скорость в секундах, с которой робот должен сканировать каждую страницу».

Владимир Суматохин,
технолог SEO-эксперт компании SEO.RU

Пусть другие тоже знают!

Еще на эту тему

Google обновил PageSpeed Insights
Google обновил PageSpeed Insights
Теперь инструмент PageSpeed Insight не только анализирует со...
12.01.2018 5059
Google начал бета-тестирование собственного SEO-сервиса
Google начал бета-тестирование собственного SEO-сервиса
Search Engine Journal заметил, что Google начал тестировать ...
15.11.2018 948
Компания SEO.RU получила награду за самый динамичный рост в отраслевом SEO-рейтинге
Компания SEO.RU получила награду за самый динамичный рост в отраслевом SEO- ...
31 октября, на конференции Optimization были вручены награды...
18.11.2019 371
Показать еще материалы

Другие интересные статьи

Расширенные сниппеты, быстрые ответы Google, дата публикации: секреты настройки для СМИ и блогов
Расширенные сниппеты, быстрые ответы Google, дата публикации: секреты настр ...
Для новостей в сниппетах может выводиться дата публикации, ч...
13.02.2018 2490
SEO-продвижение для блога
SEO-продвижение для блога
SEO для блога компании, особенности продвижения и наполнения...
11.02.2019 2593
Что такое seo-статьи и как их правильно писать? Оптимизация статей для seo-продвижения
Что такое seo-статьи и как их правильно писать? Оптимизация статей для seo- ...
Разбираемся в том, как писать seo-оптимизированные статьи дл...
11.07.2018 7022
Сколько стоит seo-продвижение сайта
Сколько стоит seo-продвижение сайта
Из чего складывается цена SEO продвижения сайта в Яндекс и G...
31.01.2019 5988
Показать еще материалы