Атрибут ссылки rel nofollow: всегда ли он работает?

Получил любопытный комментарий к статье об использовании Twitter для ускорения индексации:

а ссылки в твиттах разве не закрыты от индексации тегом nofollow? Смысл тогда в твиттах остается только в аудитории самого твиттера и внутренних хештегах

Довольно часто сталкиваюсь с похожим мнением насчет nofollow. Дескать, достаточно использовать этот атрибут – и но пасаран, поисковые роботы наталкиваются на забор, ссылка не будет учитываться в ранжировании. Так ли это?

Для начала немного матчасти, потом перейдем к более интересным вопросам.

Что такое rel nofollow и зачем он нужен?

Цитирую справку Google:

Значение nofollow запрещает поисковой системе переходить по ссылкам на данной странице или по конкретной ссылке.

Пример закрытой от робота ссылки:

 <a href="signin.php" rel="nofollow">Войти</a>

Как Google обрабатывает ссылки с запрещенным переходом?
Как правило, переход не производится. Это означает, что по этим ссылкам Google не передает ни PageRank, ни текст ссылки.

Гугл рекомендует использовать nofollow для закрытия ссылок на ненадежный контент (если вы не готовы поручиться за его качество), платных ссылок, а также для управления индексацией (например, чтобы не тратить ресурсы робота на сканирование технических страниц).

Пока все укладывается в концепцию “непреодолимого забора”. Однако в тексте справки не зря сделана оговорка “как правило”. У правила есть исключения.

Google может учитывать ссылки из соцсетей, невзирая на nofollow

Вот видео с ответом Мэтта Каттса на соответствующий вопрос:

С момента публикации видео прошло довольно много времени, однако нам важен сам факт официального признания такой возможности.

Учитывается ли rel nofollow Яндексом?

Здесь уже интереснее.

С одной стороны Яндекс сообщает, что:

Атрибут работает аналогично мета-тегу со значением nofollow, но распространяется только на ссылку, для которой указан.

С другой – из справки по Яндекс.Вебмастеру упоминание о nofollow с некоторых пор исчезло. Сравните:

и

А теперь пора отвлечься от заявлений поисковых систем и перейти к практике.

Что говорят наблюдения?

Влияние на переход робота и индексацию

Примерно полгода назад я опубликовал статью Как проходит индексация нового сайта: наблюдаем за поведением роботов. Это изложение моего опыта по тщательному отслеживанию и протоколированию влияния внешних факторов на активность поисковых роботов.

Нам здесь важно, что в ходе этого исследования удалось достоверно установить связь между публикацией ссылки в Twitter и заходом на страницу-акцептор робота Яндекса. Для Google наблюдались похожие эффекты, но Googlebot стимулировался Твиттером значительно хуже, поэтому однозначный вывод сделать нельзя.

Учет анкоров в выдаче Яндекса

Используя оператор inlink для поиска по анкор-листу, легко убедиться в том, что анкоры ссылок с nofollow учитываются Яндексом. Например, на этом блоге все внешние ссылки имеют атрибут nofollow. Строго по рекомендации Google – я же не могу поручиться за контент внешних сайтов. Закрыл все скопом, чтобы ссылаться куда хочу, не заморачиваясь качеством акцептора в глазах поисковика.

Делать вручную исключение даже для своего проекта лень. Зато у нас есть удобный объект для теста.

Например, из статьи с исследованием влияния title я сослался на свой сервис анализа сайта https://bez-bubna.com/ так:

[Из этого, однако, не следует, что теперь надо срочно впихивать в тайтлы максимум ключей. Хотя я, как основатель сервиса, который помогает находить варианты для для увеличения охвата запросов — был бы не особо против. Но честность обязывает напомнить: каждому проекту сложнее визитки на 5 страниц нужен собственный подход, требующий приложения непустой оптимизаторской головы. В том числе и в плане проработки title.]

Попробуем найти страницу по анкору. Для этого используем конструкцию, предложенную Сергеем Людкевичем:

url:https://bez-bubna.com/info/kak-stroyatsya-otchetyi/4-detalnyie-rekomendatsii-po-dorabotke-vazhnyih-stranits/ << inlink:(“находить варианты для для увеличения охвата запросов”)

Что видим?

Страница нашлась, ссылки в nofollow передают анкорный вес для Яндекса. В Яндекс.Вебмастере эта ссылка (как и все остальные с моего блога) тоже отображается.

Кстати, я наблюдал и реальные переходы из поиска по ключам, соответствующим анкорам ссылок в nofollow (в тексте страницы запрос отсутствовал).

Итоги

• В использовании nofollow есть ряд нюансов, поисковые роботы далеко не всегда воспринимают его как запрет.
• В случае крупных сайтов, таких как Твиттер, ссылка, даже отдающаяся через редирект и закрытая с помощью nofollow может учитываться поисковыми системами. Этому есть в том числе официальные подтверждения.
• Яндекс учитывает анкоры ссылок с рассматриваемым атрибутом. Применяются ли при этом какие-либо “штрафы” к передаваемому весу, пока сказать сложно, тут требуются дополнительные исследования.