Тег ноиндекс

МЕТА тег robots служит для того, чтобы разрешать или запрещать роботам, приходящим на сайт, индексировать данную страницу. Кроме того, этот тег предназначен для того, чтобы предлагать роботам пройтись по всем страницам сайта и проиндексировать их. Кроме того, этим тегом могут воспользоваться те, кто не имеет доступа к корневому каталогу сервера и изменить файл robots.txt, но хочет запретить к индексированию свои файлы и директории.

Формат мета-тега Robots

МЕТА тег robots помещается в тег html-документа (внутри тега <HEAD>). Формат достаточно прост (регистр букв значения не играет)
<META NAME=»ROBOTS» CONTENT=»value»>

Данному мета-тегу можно присвоить варианта четыре значений. Атрибут CONTENT может содержать следующие значения:
Index (индексировать), noindex (не индексировать), follow (следовать по ссылкам), nofollow (не следовать по ссылкам)

Например, не индексировать данный документ:

 <META NAME="ROBOTS" CONTENT="NOINDEX>

Робот поисковой машины не должен идти по ссылкам с данной страницы.

 <META NAME="ROBOTS" CONTENT="NOFOLLOW">

Для одновременного запрета индексирования страницы и обхода ссылок с нее используйте

 <META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">

Если значений несколько, то они разделяются запятыми.
Чтобы запретить индексирование страницы на вашем сайте только роботам Google и разрешить ее индексирование другим роботам, используйте следующий тег:

 <META NAME="GOOGLEBOT" CONTENT="NOINDEX, NOFOLLOW">

Чтобы разрешить роботам индексировать страницу, но запретить индексирование картинок на странице, используйте следующий тег:

 <META NAME="ROBOTS" CONTENT="NOIMAGEINDEX">

Google автоматически создает и архивирует «снимок» каждой сканируемой страницы. Версия, сохраненная в кэше, позволяет показывать вашу страницу конечным пользователям, даже если исходная страница недоступна (из-за временной технической проблемы на веб-сервере). Сохраненная в кэше страница представляется пользователям в том виде, в котором ее в последний раз просканировал робот Google, при этом вверху страницы мы показываем сообщение о том, что это версия из кэша. Пользователи могут получить доступ к кэшированной версии, нажав на ссылку «Сохранено в кэше», расположенную на странице результатов поиска.

Чтобы запретить всем поисковым системам выводить эту ссылку на ваш сайт, добавьте в раздел <HEAD> следующий тег:

 <META NAME="ROBOTS" CONTENT="NOARCHIVE">

Чтобы запретить выводить ссылку «Сохранено в кэше» только системе Google, а остальным разрешить, используйте следующий тег:

 <META NAME="GOOGLEBOT" CONTENT="NOARCHIVE">

Примечание. Этот тег удаляет только ссылку «Сохранено в кэше» на соответствующую страницу. Google продолжит индексировать страницу и выводить ее фрагмент.

Предотвращение сканирования или удаление фрагментов

Фрагмент — это текст, который показывается под названием страницы в списке результатов поиска и описывает содержание страницы.

Чтобы запретить Google выводить фрагменты с вашей страницы, добавьте в раздел <HEAD> следующий тег:

 <META NAME="GOOGLEBOT" CONTENT="NOSNIPPET">

Примечание. При удалении фрагментов удаляются также и сохраненные в кэше страницы.

Как сделать так, чтобы поисковые системы не использовали данные DMOZ в результатах поиска для вашего сайта

Одним из источников, которые используются при создании фрагментов описаний, является Open Directory Project. Чтобы никакие поисковые системы (поддерживающие метатеги) не использовали эту информацию для описания страницы, добавьте следующий тег:

 <META NAME="ROBOTS" CONTENT="NOODP">

Чтобы только для Google запретить использовать эту информацию в описании страницы, добавьте тег:

 <META NAME="GOOGLEBOT" CONTENT="NOODP">

Если метатег «robots» используется для других команд, их можно объединить. Пример:

 <META NAME="GOOGLEBOT" CONTENT="NOODP, NOFOLLOW">

Пример использования описания:

 <META NAME="Description" CONTENT="Информация для WEB-разработчиков, 	программистов и студентов ВУЗ-ов, изучающх WEB-технологии.">

Поисковые запреты

Как сказать поисковой машине, что определенный участок кода не нужно индесировать или что по определенной ссылке не нужно следовать?

Каждый поисковик тут изобретает свой велосипед: Yandex рекомендует заключать подобный текст в теги <noindex>, Google дописывать у ссылок атрибут rel=»nofollow», Yahoo добавлять класс class=»robots-nocontent».

Тег NOINDEX

Запретить индексирование можно не только для файлов, но также и для их частей. Для того, чтобы запретить индексирование определенных частей файлов (текстовых), необходимо пометить их специальными тегами <NOINDEX></NOINDEX>.
При этом, тег NOINDEX не должен нарушать вложенность других тегов. Понимает только ПС Яндекс.

rel=»nofollow»

Чтобы указать поисковой системе не идти по ссылке, в теге A можно задать атрибут rel=»nofollow»:

 <a rel="nofollow" href="htmlweb.ru>WEB-технологии</a>

Данный атрибут не влияет на индексацию ссылки. В большинстве поисковиков (кроме Google) переход по ней все-таки осуществляется. Единственная задача данного атрибута — сообщить поисковой системе, что рейтинг со страницы, на которой ссылка размещена, не должен передаваться странице, на которую данная ссылка ведет.

Если вам необходимо уменьшить количество внешних ссылок на странице, заключите их в теги <NOINDEX>здесь ссылки</NOINDEX> или <!—NOINDEX—>здесь ссылки<!—/NOINDEX—>

Использованны материалы с сайтов поисковых систем: Google

class=»robots-nocontent»

Применение «class=robots-nocontent» атрибут:
Ниже приводятся несколько примеров того, как применять этот атрибут для различных целей и различных вариантов синтаксиса:

<div class="robots-nocontent">     Это навигационного меню сайта и является общим на всех страницах.     Она содержит много терминов и слов, не связанных с сайтом </div>

<span class="robots-nocontent"> Это сайт заголовок, который присутствует на всех страницах сайта     и не связан с какой-либо конкретной страницей </span>

<p class="robots-nocontent">     Это Юридическая информация требуется на каждую страницу сайта </p>

Как часто индексировать документ поисковому роботу?

Вебмастер может «сказать» поисковому роботу или файлу bookmark пользователя, что содержимое того или иного файла будет изменяться. В этом случае робот не будет сохранять URL, а браузер пользователя внесет или не внесет это файл в bookmark. Пока эта информация описывается только в файле /robots.txt, Пользователь не будет знать о том, что эта страница будет изменяться.

Мета-таг DOCUMENT-STATE может быть полезен для этого. По умолчанию, этот мета-таг принимается с CONTENT=STATIC.

<META NAME="DOCUMENT-STATE" CONTENT="STATIC"> <META NAME="DOCUMENT-STATE" CONTENT="DYNAMIC">

Зеркала

Как исключить индексирование поисковой системой генерируемых страниц или дублирование документов, если есть зеркала сервера?

Генерируемые страницы — страницы, порождаемые действием CGI-скриптов. Их наверняка не следует индексировать, поскольку если попробовать провалиться в них из поисковой системы, будет выдана ошибка. Что касается зеркал, то негоже, когда выдаются две разные ссылки на разные сервера, но с одним и тем же содержимым. Чтобы этого избежать, следует использовать мета-таг URL с указанием абсолютного URL этого документа (в случае зеркал — на соответствующую страницу главного сервера).

<META NAME="URL" CONTENT="absolute_url">

htmlweb.ru

Что это конкретно и как влияет?

Что это

Здесь может быть много всего:

куски неуникального текста, взятые вами с чужого сайта и вставленные в вашу уникальную (изначально) статью,
обилие кодов рекламы — тизеры, баннеры, контекстная реклама и другая,
множество JavaScript-скриптов и кодов flash-приложений,
разные блоки ссылок в сайдбаре вроде «наши друзья»,
куча установленных счётчиков,
и др.

Как влияет

Исходя из двух пунктов списка, указанных в начале статьи, влияет это так:

портится уникальность текстов;
происходит «разбавление» плотности ключевых слов страниц сайта.

Поэтому неплохо бы закрыть все лишние части материалов от индексации поисковыми роботами.

Тег Noindex Яндекса и скрытие кода от его роботов

К сожалению (а может, и нет), закрыть от индексации отдельные участки HTML-кода позволяет лишь Yandex. Возможно, со временем Google и Bing также предложат что-нибудь аналогичное. А может, их разработчики просто не считают это необходимостью.

В общем, тега noindex в Google нет! — особо указываю на это из-за того, что в Сети полно разговоров по данному поводу. Зато поисковик Гугл позволяет скрывать всю страницу от роботов через X Robots tag, а также стандартными средствами — как и остальные ПС:

Через файл Robots.txt.
При помощи meta name robots.

Использование Noindex в Яндексе

Пользоваться им не сложнее, чем любым другим HTML-тегом. Обычно выглядит всё так:

<noindex>

Что-то из того, что не надо отдавать Яндексу

</noindex>

Возможен и альтернативный вариант — тег ноиндекс в виде стандартного HTML-комментария. Вот, к примеру, как можно скрыть контекст от AdSense:

— т.е. всё то же самое, но добавляем указание на то, что это комментарий. На мой взгляд, такой вариант предпочтительней.

Кстати, чтобы узнать, где на веб-странице расставлены блоки тегов ноуиндекс, можно поставить:

дополнение RDS bar в Chrome.
дополнение Page Promoter bar в Firefox.

Они будут буквально «подсвечивать» участки кода, «завёрнутые» в этот тег. Правда, RDS bar иногда не подсвечивает вариант в формате комментария — <!––noindex––>.

Когда использовать?

Как и писал выше, noindex в Яндекс нужен для скрытия ненужных кусков кода, чтобы не уменьшалась уникальность текстов и релевантность статей запросам. Будет вполне логично, если возникнет мысль закрыть всё-всё, кроме текста оптимизированной статьи в тег ноиндекс — включая анкоры ссылок в верхнем меню, шапку сайта, комментарии и прочее.

На самом деле, так разгоняться не стоит. На это есть две причины:

Подобные манипуляции (если переборщить) могут быть расценены Яндексом как поисковый спам.
Роботы современных ПС способны различать, где, например, находится блок со статьёй, а где — комментарии к ней. Yandex тоже может — где-то 10 месяцев назад я у них это лично выяснил, т.к. планировал позакрывать все блоки с комментариями в Noindex.

С комментариями получается довольно интересно — поисковикам нравится обилие комментариев, т.к. это свидетельствует о хорошем поведенческом факторе. Поэтому не надо переживать, что тексты комментаторов уменьшат релевантность статьи запросу — лучше подумать об их защите от спама.

Также, на мой взгляд, лучше закрыть блоки AdSense от «глаз» Яндекса (как и любые другие рекламные коды) — чтобы этот поисковик не посчитал ваш сайт «слишком» рекламным и не применил некоторые поисковые санкции. НО оставить открытыми блоки РСЯ.

Смысл в том, что в РСЯ принимаются только качественные ресурсы с точки зрения Яндекса, поэтому наличие данной рекламы может намекнуть этой ПС о «качественности» вашего проекта и повысить такую абстрактную характеристику, как траст сайта.

web-ru.net

Как добавить атрибут noindex

Добавить директиву noindex можно двумя способами. Их результаты равнозначны, а выбор зависит от того, в какой степени вы можете управлять сервером и как осуществляете публикацию контента.

Тег <meta>

Чтобы заблокировать большинство поисковых роботов, добавьте следующий метатег в раздел <head> веб-страницы:

 <meta name="robots" content="noindex">

Если вы хотите закрыть доступ к странице только роботам Google, используйте такой код:

 <meta name="googlebot" content="noindex">

Другие поисковые системы могут иначе интерпретировать атрибут noindex на странице и показывать ее в результатах поиска.

Подробнее…

Помогите нам обнаружить метатеги

Чтобы обнаружить метатеги, мы должны просканировать вашу страницу. Если страница продолжает появляться в результатах поиска, вероятно, мы ещё не просканировали ваш сайт после добавления тега. Повторное сканирование страницы роботом Google можно запросить при помощи инструмента Просмотреть как Googlebot. Другая причина – файл robots.txt блокирует этот URL от робота Google, и метатег не обнаруживается. Чтобы разблокировать вашу страницу для Google, необходимо изменить файл robots.txt. Это можно сделать с помощью Инструмента проверки файла robots.txt.

Заголовок ответа HTTP

Вместо метатега можно возвращать заголовок X-Robots-Tag

. В ответе должно быть указано значение noindex или none. Пример HTTP-ответа, где X-Robots-Tag запрещает роботам индексировать страницу:

 HTTP/1.1 200 OK (…) X-Robots-Tag: noindex (…)

Подробнее…

ДАЛЕЕ: ОТКАЗ ОТ ПОКАЗА В GOOGLE+ И ДРУГИХ СЕРВИСАХ GOOGLE

support.google.com

Тег noindex – что такое?

Если говорить коротко, то No index запрещает поисковым роботам индексировать какой-либо элемент на сайте. Данный тег не валидный, поэтому многие html-редакторы не воспринимают его. Например, чтобы редактор WordPress учитывал тег, то необходимо прописать:

<!—noindex —>

<!—/ noindex —>

Если прописать в таком формате тег не исчезнет. Еще нужно понимать, что тег noindex актуален только для поисковой системы Яндекс. В Google он никак не учитывается.

Не путайте тег noindex с атрибутом noindex, который прописывает 1 раз в шапке сайта.

<noindex> запрещает индексировать контент внутри этого тега. Что касается meta name=”robots” content=”noindex, nofollow”, он закрывает всю страницу от индексации, но этом я рассказал в данной статье.

Рассмотрим пример noindex:

<noindex>Этот текст не появится в поисковой системе Яндекс</noindex>

Также вложенность не столь важна, и тег может располагаться на в любом месте html кода.

Не забывайте! Если есть открывающий тег <noindex>, то должен быть и закрывающий </noindex), иначе ПС Яндекс не проиндексирует всю информацию.

Оптимизаторы доспускают ошибки, когда заносят все ссылки под noindex. Текст, тобишь анкор учитывается, но сама ссылка и ее вес нет. Для этого используют атрибут nofollow в теге <a>.

Читайте в нашем блоге: Продвижение сайта в регионах — поддомены для Яндекса

Зачем нужно использовать noindex?

Давайте разберем в каких случаях стоит применять тег, а в каких это не требуется.

Я использую, когда нужно:

Спрятать коды древних счетчиков, если вы их еще используете (LiveInternet, Rambler и прочие). Яндекс Метрику и Google Analytics помещать не обязательно;
Спрятать различные RSS-ленты, подписку на рассылки итд.

Не нужно:

Закрывать от индексации контекстную рекламу РСЯ, Adsense от поисковых систем Яндекс и Google. При обходе страницы роботы видят рекламу и не учитывают ее;
Прописывать внешние и внутренние ссылки внутри тега, поисковые системы не будут воспринимать это все равно. Плюс это выглядит глупо, когда есть другой тег который отвечает за ссылки nofollow. Но о нем чуть ниже.

Каков итог:

Старайтесь по минимуму использовать данный тег, чтобы не было различий между поисковыми системами Яндекс и Google.

Атрибут nofollow тега <а> – Что это такое?

В 2005 году Google представил новый атрибут (названный атрибутом ссылок) Nofollow.

Атрибут nofollow используется при закрытии ссылок от индексации поисковыми роботами Яндекс и Google. Данный атрибут запрещает передавать вес с одного сайта на другой.

В чем отличие от noindex?

Ноиндекс – это тег, который запрещает роботу индексировать текст, нофоллоу – относится к тегу <a> (тег ссылки) запрещает передавать вес по ссылке.

Пример тега nofollow:

<a href=»http://site.ru" rel=»nofollow»>любой анкор</a>

Важно! Не стоит путать его с атрибутом nofollow мета-тега robots. Задача nofollow тега <a> скрыть конкретные ссылки, когда как meta robots content=”nofollow” не учитывает все ссылки на странице, то есть действует на всю страницу.

Узнать что такое атрибут content=”noindex, nofollow” тега meta name robots ?

Использование nofollow

Поисковая система Яндекс с мая 2010 перестал учитывать данный атрибут. Что касается Google то давайте разберем, как правильно использовать nofollow:

Ненадежный сайт. Если вы ссылаетесь на сайт, но не уверены в его качестве (допустим он окажется спамным) то следует закрыть ссылку nofollow. Тем меньше спамных ссылок на сайте тем лучше;
Платные ссылки. К данному пункту необходимо отнестись осторожно потому что, Google негативно относится к спамным ссылкам. От одной-двух ссылок ничего не будет, но если у вас таких ссылок, например, 100 штук, стоит об этом задуматься. Поэтому прописать атрибут важно, чтобы не получить санкции со стороны поисковой системы.

Одновременное использование nofollow и noindex

Поисковые системы допускают такое сочетание, когда их ставят друг с другом.

Пример

<noindex><a href=”http://site.ru” rel=”nofollow”>любой анкор</a></noindex>

Таким образом, вы закрываете от индексации и анкор (с помощью noindex) и ссылку (с помощью).

Читайте в нашем блоге: Хлебные крошки — что это такое?

Заключение

Подводя итоги, хочу сказать, что поисковые системы в последнее время меньше стали учитывать данные теги и атрибуты, чем это было к примеру лет 10 назад. Поэтому не заостряйте внимание только на чём-то одном, ведь сейчас выигрывает тот, кто делает все комплексно.

Оставляйте комментарии к статье, если у вас остались вопросы. А я желаю вам удачи и продвижения своих сайтов белыми способами!

edison.bz

Общие сведения

Как и в случае с атрибутом nofollow, с которым я рекомендую ознакомиться, noindex имеет значения, как в случае обычного тега, так и мета-тега.

Тег noindex закрывает от индексации только те части, которые заключены внутри него;
Мета-тег noindex — закрывает всю страницу от индексирования.

В первом случае, тегом оборачиваются необходимые части текста на страницах, которые не нужно индексировать. Это могут быть служебные участки текста или же какая-то конфиденциальная информация.

Тег можно использовать, как в общепринятом варианте, так и валидном, чтобы сделать код страницы валидным и убрать ошибки за счет тега. Снизу даю 2 строки, первая из которых обычный вариант, а вторая — валидный.

Какой вариант использовать, решайте сами. Я же пришел ко второму.

В случае же с мета-тегом, noindex добавляется в шапку сайта, что запрещает всю страницу от индексации. Необходим в том же случае (служебные страницы и так далее), только уже для полной страницы.

В данном случае noindex является значением мета-тега robots (см. ниже).

«>

Теперь по поводу использования данного тега.

Применение

Как я уже я писал выше, применять его стоит в том случае, если на странице имеется какая-то служебная информация. Также это имеет место, когда имеются неуникальные куски текста, которые пагубно влияют на продвижения страницы. Их также можно закрывать тегом noindex.

Если же взять мета-тег, который применяется ко всей странице и содержится внутри мета-тега robots (скриншот выше), то данный случай стоит применять для закрытия целых страниц от индексации. Это могут быть целые служебные страницы, не несущие никакой пользы сайту и посетителям. Например, страницы контактов, карты сайта и так далее.

Также имеет место закрытие страниц пагинации, то есть тех страниц, которые разбиваются на списки. Например, в постраничной навигации на сайте можно закрыть все страницы, кроме первой, чтобы обезопасить себя от появления дублированного контента.

«>

Хотя, в последнее время я перестал закрывать страницы мета-тегом noindex. Связано это с произведенным мной анализом других популярных сайтов. Я увидел, что никто из гигантов не использует такое закрытие. Исходя из этого, я также убрал. Хотя раньше я добавлял noindex на такие страницы и все работало на ура. Поэтому, если у вас мета-тег добавляется на страницы пагинации, то можете не переживать.

Главное, чтобы сами контентные страницы были полностью открыти и на них не было мета-тега noindex.

Посмотреть его наличие можно в исходном коде страницы, нажав комбинацию клавиш ctrl+u.

Касаемо моего сайта, то я применяю тег и довольно часто, но не в самих статьях, а в самой верстке шаблона. Я закрываю все части, которые не несут смысловой нагрузки сайту:

социальные кнопки;
формы подписки;
на страницах рубрик, архивов и поиска закрываю текст краткого анонса, чтобы не дублировать контент, ведь он доступен и в полной версии статьи.

Проверить закрытые части данным тегом можно с помощью дополнения к браузеру RDS bar.

Вот, как выглядит закрытие формы подписки и социальных кнопок при активном RDS баре (закрытые области подсвечиваются коричневым).

«>

А вот закрытый кусок текста на страницах рубрик, архивов и поиска.

«>

Таким образом можно закрыть очень много ненужного в своем шаблоне.

На этом можно заканчивать данный материал. Больше о данном теге ничего толкового и не скажешь. В окончание хочу сказать, что если вы хотите закрывать внешние ссылки в noindex, то закроется только содержимое ссылки, то есть ее анкор.

Сама же ссылка работать будет и вес также будет передаваться акцептору. Для закрытия внешних ссылок, нужно использовать атрибут nofollow.

Если у вас остались какие-то вопросы по поводу тега noindex, то пишите их в комментариях под блоком похожих записей, которые также можете почитать. Уверяю вас, будет интересно.

Все, друзья. До связи.

С уважением, Константин Хмелев!

kostyakhmelev.ru

Подробнее о теге noindex

Исходя из названия, этот тег запрещает индексацию определенного куска кода html (но это не касается ссылок и картинок — только текста).

Следует заметить, что ряд html-редакторов принципиально не работает с тэгом noindex — например, в WordРress он автоматически удаляется. Однако он станет валидным в таком виде: Этот тег работает только с поисковой системой Яндекс. Великий и могучий Google его не воспринимает.

Можно применять тег noindex в качестве простого тега и мета-тега. Соответственно, их функции в таком случае будут разными. Обычный тег скроет от индексации только тот участок кода, который будет находиться между его открывающим и закрывающим тэгами. Применяемый в качестве мета-тега, noindex, прописанный в файле robots.txt, запретит индексировать целиком всю страницу.

Несмотря на то, что в большинстве случаев действие тега удовлетворительное, в некоторых ситуациях спрятанная от индексирования текстовая информация все равно индексируется. Это связано с самим принципом работы поисковой системы. Тег noindex Яндекс воспринимает, но все равно проиндексирует целиком весь код html, и лишь после отфильтрует значения согласно тегам. Так что даже если текст проиндексирован, это явление временное — он скоро исчезнет из поля зрения Яндекса.

К слову — для noindex необязательно вложенное размещение. В справке поисковой системы Яндекс указано, что тег будет работать и при неправильной вложенности.

Как пользоваться тегом noindex

Тег был разработан, чтобы поисковая система не считывала ненужные куски кода, которые не несут важной информации для поиска. Поэтому грамотно будет прописать noindex для того, чтобы не индексировать коды счетчиков, формы подписок и рассылок, баннеры и информацию из сайдбаров, часто меняющееся текстовое наполнение. Иногда тэг употребляют, чтобы спрятать копипаст, а также нецензурщину на странице.

Но, как уже говорилось, бессмысленно применять тег для того, чтобы скрыть внутренние и внешние ссылки, а также рекламу типа Яндекс.Директ и пр.

Подробнее о nofollow

Этот атрибут способен скрыть ссылки от индексации. Причем, он одинаково эффективно взаимодействует и с Google, и с Яндекс. Кстати, Яндекс научился воспринимать nofollow совсем недавно.

Чтобы продолжить знакомство с nofollow, следует разъяснить понятие веса ссылки. Вес ссылки показывает ее значимость при продвижении ресурса. Его используют поисковые системы при ранжировании сайтов. Ресурс, который адресует большое количество качественных внешних ссылок (ссылок с других сайтов), будет иметь более высокий рейтинг.

Вес ссылки при использовании атрибута rel nofollow не будет передан на ссылаемый сайт.

Вот один из примеров применения nofollow Но при этом ссылки, которые ведут на внутренние страницы сайта, во многих случаях бесполезно закрывать атрибутом nofollow.

Как пользоваться nofollow

Тег nofollow логично будет применять, чтобы ограничить передачу веса по ссылкам, которые ведут на ненадежный для поисковых систем сайт, или любой другой ресурс, не имеющий принципиального значения для владельца сайта. Тегом можно определить передачу веса по ссылке на сайт, который не соответствует тематике ссылаемого ресурса.

Также атрибут будет полезен при уменьшении количества исходящих ссылок — если на странице много внутренних и внешних ссылок. Тегом можно ограничить отдачу веса на ссылку, которая ведет на сайты, имеющие очень большой ТИЦ.

Важно не переусердствовать — избавив страницу от ссылок, можно автоматически снизить доверие к ней поисковых систем. Лучше оставить две-три ссылки. На вес это особо не повлияет.

wildo.ru

Зачем использовать тег <noindex> и атрибут rel=«nofollow»

Невзирая на то, что мы упоминаем тег <noindex> и атрибут rel=«nofollow» в пределах одной статьи, они являются совершенно разными элементами кода страниц сайта и соответственно используются для различных целей. Для каких именно, читайте далее по тексту.

Тег <noindex>. Значение и условия применения

Тег <noindex> – размещаемый в HTML-коде странички тег, который запрещает боту поисковой системы Яндекс индексировать часть текста (заключенную внутри него). Тег noindex Яндекс ввел по собственной инициативе, которую до сегодняшнего дня разделяет лишь Рамблер.

Поэтому при использовании тега noindex, Google не будет обращать на него внимания.

Если нужно, чтобы не индексировалась ссылка, noindex не сможет помочь.

В данном примере от индексации будет закрыт лишь анкор «Курсы SEO», а сама ссылка все же будет учтена и по ней передастся вес.

Кстати, довольно часто встречающаяся в сети конструкция rel=«noindex» является ошибочной, поскольку это не атрибут, а тег.

Еще один момент, к которому нужно быть готовым – закрывая от робота часть текста, <noindex> приводит к тому, что валидация сайта будет содержать множество ошибок в коде. Причина все та же: среди тех, кто понимает тег noindex – Яндекс и никто более из существенных поисковиков. Кроме того, этот тег не является стандартизированным.

Но выход все же есть. Для того, чтобы исключить ошибки, связанные с использованием этого тега, существует вариант его написания, который устраивает абсолютно всех:

В этом случае тег будет распознан Яндексом, другие поисковики не обратят на него внимания, а проверка кода не будет воспринимать его, как ошибку.

Несмотря на явную пользу от возможности использовать тег noindex, Google так и не принял его и не создал ничего аналогичного.

Кстати о пользе – вот несколько конкретных ситуаций, в которых данный тег незаменим (не забываем, это актуально только для Яндекса):

Когда нужно спрятать неуникальный текстовый контент.
Закрыть от глаз поисковых роботов коды различных счетчиков.
Убрать из индексации текст, который слишком часто меняется и его добавление в индекс является бессмысленным.

rel=«nofollow». Атрибут, который «работает» со всеми поисковиками

Для того чтобы дать роботу поисковика указание о том, что не нужно переходить и передавать вес по ссылке, существует атрибут тега <a> rel=«nofollow». Он является стандартизированным элементом HTML-кода и воспринимается абсолютно всеми поисковиками.

Причем его использование не делает ссылку невидимой, а лишь указывает, что по ней не нужно переходить и заниматься индексацией страницы, на которую она указывает.

Пример использования:

Использование rel=«nofollow» позволяет:

Исключить передачу веса на «плохой» (с точки зрения поисковых систем) или нетематичный сайт, чтобы не «испортить» свою репутацию.
Повлиять на перераспределение веса между присутствующими на странице ссылками.
Управлять количеством учитываемых исходящих ссылок на страничке.
Закрыть в комментариях ссылки, по которым не предполагается передача веса.

С использованием атрибута rel=«nofollow» важно не переусердствовать: если постоянно скрывать с его помощью ссылки, это может значительно повлиять на уровень доверия поисковиков к Вашему сайту.

Где еще используются noindex и nofollow

Также noindex и его постоянный спутник nofollow могут использоваться совершенно в ином виде – как значения атрибута content в составе мета-тега robots. Последний, в свою очередь, используется в HTML-коде страницы для указания поисковым ботам рекомендаций насчет индексации страничек и переходу по размещенным на них ссылкам.

Приведенный на скриншоте пример трактуется, как пожелание не выполнять индексацию содержимого странички и не анализировать ссылки, размещенные на ней. Наличие подобной конструкции в теле кода страниц может быть возможной причиной, по которой не индексируется сайт.

Основные выводы

Использование одного из вышеупомянутых элементов (или обоих сразу) зависит от условий, которые преследуются (сокрытие части текста, ссылки или всей страницы при использовании с мета-тегом robots).

Если нужно скрыть от робота Яндекса отдельный текст, noindex это сделает, но когда закрывается ссылка, noindex не поможет. В этом случае следует выбрать атрибут rel=«nofollow», не скрывающий анкор ссылки.

Теперь, когда Вы разобрались с особенностями применения <noindex> и rel=«nofollow», не забудьте поделиться этой важной информацией с теми, кто может в ней нуждаться!

seo-akademiya.com

Тег <NOINDEX>

Парный тег <NOINDEX></NOINDEX> поддерживается (лишь) поисковиками Яндекс и Рамблер и предназначен для запрета к индексации текста страницы (а также любой другой информации/кода), находящегося между открывающим и закрывающим тегами.

Никакие другие поисковые системы не используют тег NOINDEX и при наличии на странице игнорируют его также, как и любой другой тег, не удовлетворяющий стандартам.

При использовании нужно быть внимательным в использовании данного тега и не забывать закрывать </NOINDEX>, иначе, к примеру, может получиться ситуация, которая была с данным сайтом, когда в качестве «ноиндекс-эксперимента» в его названии (внутри тега <title>) присутствовал текст <NOINDEX>, в результате чего NOINDEX.by упорно не появлялся в индексе Яндекса.

Тег <NOINDEX> безразличен к вложенности (что, в частности, подтвердил вышеописанный эксперимент), потому при желании его можно сделать полностью HTML-валидным:

<!—noindex—>Текст или код, закрываемый от индексации Яндекс/Рамблер<!—/noindex—>

Вышеприведенный вариант кода — рекомендация от Яндекс. В сети можно встретить другие «самопальные» варианты валидации NOINDEX, также вполне работающие (в отношении поддерживающих NOINDEX ПС):

<span class=»inv»><![CDATA[<noindex>]]></span>
Запрещённое для индексации
<span class=»inv»><![CDATA[</noindex>]]></span>

.inv {display:none}

Использование тега NOINDEX

Наиболее распространённое (ранее, как минимум — до мая 2010 года, пока Яндекс «не понимал» атрибут nofollow) использование тега было «закрытие счётчиков» — запрет их кода для индексации, дабы уменьшить количиество исходящих ссылок с каждой страницы сайта. (Подобный метод сложно назвать «удачным», лучше использовать «Ставим правильные счётчики на сайт»).

Кто-то в попытке максимально оптимизировать сайт внутренней перелинковкой — закрывает с помощью <NOINDEX> ссылки в меню (навигации). Данный способ также сложно назвать «удачным», потому без полного понимания зачем это нужно и как оно работает — настоятельно не рекомендуется его использовать.

Часто, особенно с появлением у Яндекса фильтра ТС (Ты Спамный) — тегом noindex закрывается «лишний» (для Яндекса — ибо для Google он «остаётся», т.е. им учитывается и используется при ранжировании страницы по имеющимся в нём ключевым фразам) текст на странице. И если для некоторых случаев, к примеру, интернет-магазинов, где в noindex закрываются много раз повторяющиеся блоки описания товара — ещё можно считать такое оправданным, то наличие noindex на главной странице — настоятельно не рекомендуется, т.к. судьба его трактовки Яндексом даже в среднесрочной перспективе — крайне не очевидна.

Итого, совет по использованию тега <NOINDEX>: если есть хоть какой-то вариант его не использовать — лучше его не использовать.

noindex — значение мета-тега robots

В отличе от тега <NOINDEX>, использование noindex в качестве значения мета-тега robots является абсолютно стандартным. В таком варианте он также запрещает к индексации текст страницы и поддерживается (учитывается, используется) всеми поисковыми системами без исключения.

Используется как отдельно, так и вместе с другими значениями:

 <meta name="robots" content="noindex, follow"/>

Использование «meta name=»robots» content=»noindex»

Данная конструкция используется крайне редко, т.к. есть много других, более удачных способов для запрета к индексации.
Кроме того нужно учитывать один, может быть не очень очевидный факт: для того, чтобы учесть, что данную страницу нельзя индексировать — роботу таки нужно хотя бы первый раз её прочитать. В результате может оказаться, что запрещённая таким образом таки появится в индексе. После (в теории) она должна из него уйти, однако (на практике) при наличии сложных запрещающих условий на индексацию страниц сайта — совсем не факт.

Потому данный (давно устаревший) способ запрета индексации — рекомендовать нельзя.

noindex.by