Noindex

Термин используется в двух вариантах: как HTML-тег и как метатег файла robots.txt.

1. HTML-тег noindex — это парный тег, который используется непосредственно в коде страницы и закрывает от индексации часть документа, которая в него заключена. 

Noindex был введен Яндексом как альтернатива атрибуту nofollow и поддерживается только этой поисковой системой. Из-за неверного использования этого тега могут возникать ошибки валидации кода: тег не стандартизированный, Google и другие поисковики могут увидеть здесь ошибку. Чтобы ее избежать, достаточно применять написание, на которое не обратит внимание ни один поисковой бот, кроме бота Яндекса.

Пример использования:

 <!--noindex-->запрещенная к индексации часть документа<!--/noindex-->.

При этом данный тег не способен закрыть ссылку: контент закроется, а ссылочный вес все равно будет передаваться. 

2. Метатег noindex в составе файла robots.txt — это значение атрибута content, которое запрещает индексацию контента страницы. Файл robots.txt дает поисковикам указания по индексации всего содержимого страницы, включая переходы по указанным на ней ссылкам.