Noindex
Noindex - популярный в Рунете HTML-тег, введенный компанией Яндекс. Используется веб-мастерами для запрета индексации определенного фрагмента веб-страницы. Учет наличия этого тега осуществляется только поисковиком Яндекс.
Принципы использования Noindex
Если вы хотите, чтобы определенный фрагмент страницы был скрыт от индексации, необходимо заключить его HTML-код в этот тег. В результате роботы Яндекса проигнорируют его, а другие поисковые системы - нет.
<noindex> необходимый фрагмент </noindex>
Так как этот тег является нестандартным, чтобы соблюсти "валидность" всего документа допускается его использование в виде комментария
<!--noindex--> необходимый фрагмент <!--/noindex-->
Распространяется Noindex исключительно на текст. Закрыть с его помощью индексацию картинок или ссылок не получится, о чем знают не все веб-мастера. Так, если в тег закрывается ссылка с анкором, то поисковые роботы Яндекса проигнорируют лишь текстовое описание, а линк будет видимым.
Прописывание значения для метатега «robots»
Есть способ, который позволит закрыть веб-страницу от индексации не только для Яндекса, но и для других поисковиков. Используется для этого метатег роботс:
<meta name="robots" content="noindex" />
Но если тег <noindex> закрывает от индексации Яндексом часть - фрагмент текста, то указанная конструкция делает невидимым для всех поисковых систем документ целиком.