Атрибут rel=nofollow
Элемент тега А в HTML-разметке, который помогает бороться со спамом и ускоряет обход полезных страниц поисковыми роботами. Небольшой seo-гайд по данному атрибуту.
Мини SEO-гайд по HTML атрибуту «rel=nofollow»
В статье я расскажу как грамотно закрыть ссылку от индексации через rel=nofollow.
Понятия
Яндекс
Что же говорит нам наш родной поисковик про данный атрибут:
Атрибут работает аналогично мета-тегу со значением nofollow, но распространяется только на ссылку, для которой указан.
Данный атрибут позволит не индексировать страницу-акцептор, при отсутсвии других ссылок на неё, а также при отсуствии систем аналитики на такой старнице (к примеру, Яндекс Метрика пмозволяет передавать просматриваемые URL на обход поисковым роботом).
А вот про мета-тег nofollow в теге head пишут следующее:
— не переходить по ссылкам на странице;
Робот не посетит документы, если ссылки на них стоят со страницы, содержащей мета-тег со значением nofollow, тем не менее, они могут быть проиндексированы, если в других источниках на них указаны ссылки без nofollow.
Можно использовать также HTTP-заголовок X-Robots-Tag.
Значение nofollow запрещает поисковой системе переходить по ссылкам на данной странице или по конкретной ссылке.
Ранее nofollow применяли в метатеге на уровне страницы. Это значение указывало, что системы поиска не должны переходить по ссылкам на этой странице (т. е. не нужно сканировать соответствующие URL).
Также Гугл явно указывает в примере, что можно закрывать внутренние ссылки данным атрибутом, закрытые также в файле robots.txt
Как Google обрабатывает ссылки с запрещенным переходом?
Как правило, переход не производится. Это означает, что по этим ссылкам Google не передает ни PageRank, ни текст ссылки. Благодаря nofollow ссылки не попадают в нашу «схему» Сети. Однако соответствующие целевые страницы все равно могут быть включены в индекс Google, если другие сайты ссылаются на них без использования nofollow или если их URL предоставлены Google с помощью файла Sitemap. Необходимо заметить, что другие поисковые системы могут обрабатывать nofollow несколько по-другому.
У Google появились дополнительные атрибуты sponsored и ugc
rel=sponsored
Такой атрибут стоит использовать для пометки платных и спонсорсих ссылок. Но такую пометку рекламных материалов не будет понимать Яндекс.
rel=ugc
Используется для разметки пользовательского контента, т.е. к примеру комментарии или посты с внешними ссылками написанные пользователями ресурса.
Распространенные случаи применения nofollow:
Можно применять сразу несколько значений, через пробел или запятую чтобы поддержать, к примеру, Яндекс и другие поисковые системы.
Основное назначение
Предназначение: для поисковых систем.
Главными целями данного атрибута у ссылок (тег A) являются:
Наблюдения
На практике наблюдал и вижу следующее:
Обо всем по порядку. расскажу ниже.
Внутренние ссылки
Как посмотреть и где определить что необходимо закрыть от индексирования?
1. Google Search Console
Сканирование => Ошибки сканирования => Смартфоны => Заблокировано
Важно! Если на ресурс ссылаются также другие страницы (с открытой для индексирования ссылкой), то данный документ может остаться использоваться в обходе.
2. Яндекс Вебмастер
Индексирование => Страницы в поиске => Исключенные (вкладка)
3. Netpeak Spider
Настройки => Продвинутые => Учитывать инструкции по индексации => Атрибут «nofollow» у ссылок (ставим галку)
Тем самым мы позволим проверять сайт с учетом этого параметра. Для проверки также укажите robots.txt
Далее запускаем сканирование и смотрим:
На практике чаще всего такими страницами являются:
Подытог
На практике закрытие ссылок в rel=nofollow ведущих на технические страницы, ускоряет обход и индексацию, особенно на больших сайтах.
На сайтах с количеством более 300 тыс. страниц, после внедрения замечал увеличение обхода полезных страниц, что в итоге, также косвенно сказывалось и на трафике.
Внешние ссылки
Определить список внешних ссылок необходимых к закрытию также поможет мой любимый инструмент Netpeak Spider.
1. Netpeak Spider
После полного сканирования выгружаем отчеты:
Экспорт => Все доступные отчеты
Далее находим отчет с названием «дата
Либо в самой программе просматриваем:
База данных => Таблица со всеми результатами => Внешние ссылки
Подытог
Вы можете получить список внешних урлов необходимых для закрытия от индексирования.
Советы и заключение
Замечание. Со снижением количества мусорных страниц из обхода, также снижается трафик и нагрузка на сервер.
Оставляйте для индексации только полезные и релевантные ресурсы.
WordPress и дополнительные атрибуты
Если используете target=»_blank» или у вас стоит Вордпресс, то ссылки могут формироваться таким образом:
Про вес
Да, указывая атрибут мы теряем вес в пустоту, как распространено мнение. Но как говориться: «Бережёного Бог бережёт».
Что такое nofollow ссылки, и как их использовать (на примере WordPress)
Те, кто только начинает заниматься SEO, наверняка периодически сталкиваются с таким понятием, как nofollow-ссылки. В этой статье я хочу рассказать о том, что это такое и как их правильно использовать.
Ссылки и SEO
Начну с основ. Все мы знаем, что такое ссылки – это адреса, которые ведут с одной страницы на другую. Ссылки бывают внутренними – те, которые ведут на другие страницы этого же сайта – и внешними – они ведут на какой-то другой сайт.
Оптимизаторы часто упоминают такой термин как ссылочный вес. Это условное понятие, которое (образно говоря) характеризует авторитет страницы. Оно базируется на том, что чем больше страниц ссылается на эту конкретную страницу, тем более ценная информация (по мнению поисковых систем) на ней находится. Примерно год назад подсчитать этот «авторитет» страницы было легко – существовал такой инструмент как PageRank – однако весной 2016 года Toolbar PageRank был официально убран компанией Google, и теперь подсчитать ссылочный вес страницы сложнее. Ссылочный вес страницы продолжает играть роль при продвижении в поисковиках, но к нему прибавилось еще множество других факторов, поэтому называть его главным или основным уже нельзя.
Итак, ссылки – это один из хороших способов продвигать ваш сайт (и какую-то конкретную страницу). Но что делать, если это внешние ссылки, которые ведут на другой сайт?
Что такое nofollow
Атрибут “Nofollow” как раз и отвечает за то, чтобы страница, на которую вы ссылаетесь, не увеличила свой ссылочный вес благодаря этой ссылке. Иными словами, по этой ссылке не передается индекс цитирования (который использует Яндекс) и PageRank (который использует Google).
Зачем использовать nofollow
Основные причины, почему вам следует использовать nofollow-ссылки на своем сайте:
Иными словами, если обратиться к словам одного из сотрудников Google, атрибут “nofollow” нужен для того, чтобы показать поисковым системам, что вы не хотите иметь ничего общего с ресурсом, на который ссылаетесь (и уж тем более не хотите повышать его ссылочный вес). Чаще всего это бывает в случаях, когда: вы ссылаетесь на сайт с сомнительным содержанием или рекламный сайт, либо спамеры ссылаются на свои сайты в комментариях.
Кстати, прочитав все это, вы можете задаться вопросом: а стоит ли вообще ставить обычные исходящие ссылки, без nofollow? В целом – да. Потому что (удивительно, но факт) они могут положительно влиять на продвижение вашего сайта в поисковых системах. Например, если вы будете ссылаться на трастовый сайт (Википедия и т.д.), то это поможет поднять и рейтинг вашего сайта.
Nofollow-ссылки на WordPress
Теперь перейдем к рассмотрению того, как работать с nofollow на WordPress.
Начнем с самого простого, базового варианта – правка кода HTML.
Правка HTML-кода
Для правки кода вам нужно зайти в редактирование нужной записи и перейти в режим «Текст». Затем поставить в теге “a” соответствующий атрибут:
На этом правка кода закончена, сохраните документ.
Понятно, что всякий раз править ссылки через текстовый редактор не очень удобно, поэтому расскажу о плагинах для WordPress, которые могут упростить эту процедуру.
Использование плагинов
Найти плагины, касающиеся атрибута nofollow, можно в обычном поиске WordPress. Как видите, их немало:
Посоветую некоторые из них.
Ultimate Nofollow и Rel Nofollow Checkbox – плагины добавляют специальный чекбокс при добавлении или редактировании ссылки, отметив который у ссылки будет проставлен атрибут “nofollow”. Увидеть чекбокс можно в настройках ссылки:
WP External Links – англоязычный плагин позволяет более глобально работать с внешними и внутренними ссылками. В частности, в настройках плагина вы можете указать, что “nofollow” следует применять ко всем внешним ссылкам (External Links):
Также можно указать, следует ли открывать ссылки в этом же окне или в новом, поставить значок (icon image) рядом с ссылкой, чтобы выделить ее, и так далее.
Заключение
Атрибут “nofollow” – важный элемент SEO-сферы, который очень желательно использовать на своем сайте. Проставить его несложно, а при использовании плагинов это можно сделать в один клик или вообще автоматически.
Какая разница между тегами nofollow и noindex?
Выясняем, как работают тег noindex и атрибут nofollow. Подробно рассмотрим сценарии использования и узнаем, как прописывать теги для роботов в зависимости от поставленных задач.
Теги и атрибуты
Их еще называют дескрипторами. Это элементы разметки, с помощью которых объектам в текстовом документе придаются определенные свойства. Эти свойства зависят от языка разметки и поставленных задач. Сделать шрифт жирным, превратить кусок текста в гиперссылку или задать ей специфичные визуальные характеристики.
Но есть теги, которые выполняют несколько иные функции. В их числе nofollow и noindex. В любых своих проявлениях они никак внешне не влияют на текст и ссылки. Посетитель сайта не заметит, если часть страницы обведут в тег или пометят атрибутом nofollow. Текст будет выглядеть без изменений.
Изменения произойдут на технической стороне. Отличия заметит поисковой робот, анализирующий и индексирующий веб-страницы.
Что такое noindex
«Ноиндекс» – тег и атрибут HTML-страницы. Можно пометить им страницу целиком, придав ей определенные свойства, либо выбрать отдельный участок кода и применить атрибут к нему.
Функция noindex заключается в «сокрытии» контента от поисковых роботов, машин, анализирующих и индексирующих веб-сайты. Они собирают базу данных для поисковых служб и предоставляют пользователям релевантные результаты поиска.
Если какая-то часть контента на странице помечена тегом noindex, то робот ее проигнорирует и в поиске она учтена не будет, что прямо повлияет на SEO-продвижение ресурса, на котором были произведены соответствующие изменения.
На самом деле, робот, конечно же, посмотрит все, что есть на сайте. Просто не будет заносить это в индексную базу.
Какой контент помечается этим тегом?
Любой. В зависимости от помеченной информации и поискового робота тег будет восприниматься по-разному.
Обычно в noindex заворачивают четыре типа текстового контента:
Как использовать тег?
Тег можно вставить в страницы как мету (атрибутом), увеличив область его действия на всю страницу.
С таким кодом индексация страницы разрешается:
А с таким индексация запрещается:
Такое правило можно указать для конкретного робота. Например, поискового бота Google:
Еще один способ — встраивание тегов в текст и оборачивание в него ссылок.
Независимо от типа скрываемого контента, принцип остается тем же. Поэтому, если нужно скрыть от индексации код счетчика, ничего специфичного делать не придется. Так же оборачиваем его в и все.
Что такое nofollow
Атрибут, вставляющийся перед ссылками и запрещающий по ним переходить.
Вес страницы — это своего рода уровень авторитетности сайтов, один из факторов, учитываемых при ранжировании страниц в поисковых запросах. Чтобы не передавать вес страницы другим сайтам по размещенным на них ссылкам, данные ссылки оборачивают в тег nofollow.
Какой контент помечается этим атрибутом?
Ссылки. Но не все ссылки, а те, что могут как-то негативно повлиять на вес ресурса. Это касается автоматических ссылок, появляющихся в тех или иных участках сайта. Атрибут nofollow стоило бы приписывать любым внешним ссылкам, за которые вы не можете ручаться. Добавленные на ресурс другими пользователями через секцию комментариев или в графу профиля БИО.
Как прописывать тег?
С таким тегом индексирование страницы разрешается, но запрещается переход по всем ссылкам:
Если мы говорим о конкретных ссылках, то переход на них можно запретить прямо внутри разметки.
Преимущества тега noindex и атрибута nofollow
Некоторые полезные свойства тегов мы уже обсудили выше, но на эту тему можно сказать больше.
Выше мы использовали и nofollow в качестве мета-атрибутов, чтобы задать свойства всей странице целиком. Посмотрим, как разрешить для роботов весь контент и все ссылки:
А это полный запрет на контент и ссылки:
Данный тег спрячет от ботов страницу целиком, но то же самое можно сделать, указав соответствующую ссылку в графе Disallow файла robots.txt, который отвечает за «исключение» страниц из индексации.
Но способы отличаются тем, что мета-тег разрешает поисковикам заходить на сайт и анализировать его содержимое. А вот если ссылка указана в robots.txt, то бот не сможет на нее зайти и провести индексирование.
Во избежание неадекватного поведения ботов, на уже проиндексированных страницах лучше использовать мета-теги, а в robots.txt заносите новые ссылки, неизвестные для Google и Яндекс.
Итоги
Теперь вы знаете, какие задачи выполняют теги noindex и nofollow. С помощью них можно строго задать поведение поисковых ботов Google и Яндекс в отношении вашего сайта и тем самым улучшить показатели SEO.
Nofollow
Nofollow – тег, который используют веб-мастера при размещении ссылок на сторонние ресурсы, чтобы не превратить сетевой ресурс в бесплатную площадку для наращивания ссылочной массы, не упасть в поисковой выдаче и не быть заблокированным поисковыми системами.
Ссылки с атрибутом nofollow играют важную роль в продвижении сайтов, несмотря на то, что они не индексируются поисковыми системами. Мнение о полезности использования атрибута rel =»nofollow» расходятся. Многие считают, что на ранжирование сетевого ресурса они не влияют и поэтому получать их бессмысленно.
Давайте узнаем, чем могут быть полезны гиперссылки, закрытые от индексации.
Определение nofollow
Для чего запрещать индексацию ссылок
Есть множество причин. Перечислим самые известные и важные из них.
Как проверить наличие закрытых от индексации ссылок
В поисках площадок, подходящих для наращивания ссылочной массы, необходимо быстро и точно определять способ их установки веб-мастером: с тегом rel=»nofollow» или без него. Сделать это можно при помощи разных инструментов.
Ищем при помощи браузера Google Chrome:
При выборе площадки для размещения обратной ссылки важно уметь определять не только атрибут rel=»nofollow», но и другие теги с похожими функциями. Например, redirect, noindex, dofollow, nofollow noopener. Ссылки с атрибутами и тегами, имеющими перечисленные значения, пользы в плане наращивания ссылочной массы и продвижения сайта в поисковых системах не принесут.
Ищем при помощи дополнения к браузеру:
После этого на всех страницах, отрываемых в браузере, будут автоматически зачеркнуты все зарытые для индексации ссылки.
Обработка значения nofollow атрибута rel поисковой системой Google
Из официального справочного материала Google можно узнать, что поисковый робот по таким ссылкам не переходит. Если добавить к ссылке атрибут с указанным значением, то ссылка не попадает в сеть Google. Но закрытые таким образом от индексации страницы все равно появляются в индексе, если на них ведут открытые ссылки с других ресурсов или их адреса находятся в карте сайта. В тексте справки вы увидите словосочетание «как правило», которое использовали в предложении о переходе по закрытым от индексации ссылкам. Оно может означать, что поисковая система сама решает, переходить или не переходить, индексировать или не индексировать. Учитывая это и то, что другие поисковые системы не обращают внимания на nofollow, можно сказать, что закрытые таким образом ссылки способны приносить пользу наравне с открытыми.
Как используют ссылки в бизнесе
Прибыль напрямую зависит от посещаемости сетевого ресурса. Если по ссылкам переходят заинтересованные пользователи, то открыты они или закрыты от индексации – большого значения не имеет. Главную функцию они выполняют. Такие ссылки способны:
Какие площадки надо использовать для размещения ссылок
Размещать ссылки нужно на площадках, способных приводить на продвигаемый ресурс целевой трафик. Если установленная ссылка увеличивает число потенциальных потребителей, то она полезна, независимо от того, закрытая она или открытая для индексации. Полезные ресурсы:
Как повысить эффективность закрытых ссылок
Чтобы пользователи сетевых ресурсов интересовались вашим контентом и переходили по ссылкам на продвигаемые страницы, нужно перед публикацией материалов и установкой ссылок тщательно проверять и тестировать важные элементы статьи и околоссылочного текста. Заголовки, лиды должны мотивировать посетителя перейти на ваш сайт, контент должен быть интересным, полезным и релевантным теме. Чтобы получить максимальную отдачу от ссылки:
Ссылки, закрытые от индексации, могут быть полезнее, чем индексируемые. Все зависит от того, где установлена ссылка и куда приводит пользователя. Если для индексируемых ссылок это практически не имеет значения, то для nofollow-ссылок является основным фактором, определяющим ее полезность, так как цели для них преследуются разные. Наращивание массы индексируемых ссылок происходит преимущественно для поднятия показателей сайта, а неиндексируемых – исключительно для привлечения целевой аудитории. То есть открытые ссылки влияют на посещаемость продвигаемого сетевого ресурса косвенно, а закрытые напрямую.
В процессе ранжирования поисковые системы учитывают множество разнообразных факторов, причем делают это по-разному. «Яндекс», Google и другие поисковики принимают во внимание все ссылки, которые находят на страницах сетевых ресурсов, независимо от того, какие дополнительные атрибуты они имеют. Они лишь учитывают желание веб-мастера не допустить индексацию. Окончательное решение всегда остается за поисковой системой.
Ссылки nofollow и dofollow на сайте: сколько их должно быть
Разбираем, для чего нужны ссылки nofollow, если они не передают вес, сколько их должно быть и какое соотношение dofollow и nofollow должно быть на странице.
Несмотря на то, что с 2014 года Google отменил Page Rank, один из алгоритмов определения авторитетности страниц, ссылочный вес все еще передается и имеет значение для сайта. Поисковые боты анализируют все ссылки страниц при сканировании сайта. Веб-мастер решает, нужно ли передавать вес по ссылкам — для этого используют dofollow и nofollow, значения атрибута rel тега «a».
Ссылки со значением dofollow передают PR и анкор, это значение атрибута сообщает поисковому боту, что по ссылке можно перейти и индексировать ее:
Все ссылки, где не задан этот параметр, по умолчанию считаются dofollow. С dofollow все относительно понятно — они индексируются, анкоры учитываются, вес передается. Разберемся в особенностях ссылок с nofollow.
Когда не нужно передавать PR, в теге rel прописывают nofollow. Вот так:
В справке Google для веб-мастеров сказано, что значение nofollow не дает поисковым ботам переходить по ссылкам. Такие ссылки не передают ссылочный вес, поэтому не учитываются при расчете ссылочного веса акцепторов. Также в справке говорится, что атрибут rel=»nofollow» не дает передавать PR.
Из официального заявления Google 2005 года о введении nofollow:
«Если вы блогер(или читатель блога), вы встречали комментарии людей, которые пытаются повысить рейтинг своих сайтов, оставляя ссылки по типу «Посетите мой фармацевтический сайт». Это называется спамом, и нам это тоже не нравится. Мы протестировали новый тег, который блокирует его. Отныне, когда Google видит атрибут rel=«nofollow» в гиперссылках, эти ссылки не получают веса».
Стоит обратить внимание, что Справке написано: «Как правило, переход не производится» — можно сделать вывод, что боты рассматривают nofollow как рекомендацию, а не как строгий запрет. К тому же, в Search Console в отчете «Ссылки на ваш сайт» можно найти и nofollow ссылки, то есть поисковик их все равно воспринимает. Значит, вес не будет передаваться, но боты могут по этим ссылкам переходить.
Осенью 2019 года Google ввел новые атрибуты для рекламных ссылок:
По словам представителей Google, эти атрибуты нужны для того, чтобы поисковым ботам было проще определять природу появления ссылок. По сути, они отчасти заменяют nofollow. Поддержка обновления уже работает, но Google не настаивает на замене атрибутов в старых ссылках.
Также поисковая система сообщает, что к одной ссылке можно применить сразу несколько атрибутов, но с 1 марта 2020 года может игнорировать любые запретительные атрибуты, то есть любые ссылки могут повлиять на позиции в выдаче.
Подробнее о рекламных атрибутах можно прочитать в статье.
Раньше у Яндекса был только собственный тег noindex как альтернатива nofollow, который закрывал часть текста страницы от индексирования, но с 2010 года поисковая система стала поддерживать nofollow тоже — для запрета индексирования отдельных ссылок. Noindex работал только в Яндекс и Рамблер, Google его не поддерживал, что вызывало много неудобств у веб-мастеров.
Noindex можно использовать в сочетании с nofollow, это ограничит передачу веса ссылки и поисковые боты не обратят на нее внимание. В разделе Яндекс.Помощи об индексировании сказано, что атрибут rel=»nofollow» запрещает боту переход и индексирование ссылки.
Согласно исследованию Алексея Трудова, если использовать оператор inlink для поиска по анкор-листу, окажется, что все анкоры ссылок nofollow Яндекс учитывает. Можно сделать вывод, что вес передается, но нет точных данных о вычете передаваемого веса.
Ссылки из ВКонтакте, Facebook, Twitter и других социальных сетей содержат nofollow, поэтому не должны влиять на ранжирование в Яндекс и в Google.
SEO-специалист и директор студии«Ремарка» Дмитрий Шахов тоже считает, что посты со ссылками в соцсетях не передают вес страницам:
«. Если там что-то и передается, то поведенческие от тех пользователей, которые по этой ссылке кликнут».
Ссылки из соцсетей не передают вес, но учитываются в панели Вебмастера в Яндексе. Сергей Devaka Кокшаров в 2015 году провел эксперимент и выяснил, что ссылки из Twitter учитываются в панели Вебмастера, несмотря на nofollow и 301 редирект. Из Одноклассников не учитываются, потому что закрыты для индексации. Из Youtube появляются ссылки из закрытых nofollow описаний к видео и из аккаунтов пользователей, которые его недавно лайкали. ВКонтакте не ставит прямые ссылки на сайты в постах, а всегда использует 302 редирект, поэтому Яндекс отображает конструкции vk.com/away.php.
Сергей также сообщал, что всегда учитываются и отображаются ссылки из настроек публичных страниц, у которых нет параметра«post» в URL.
В любом случае, если ссылки из соцсетей не передают вес, они служат для поисковых систем сигналом о том, что страницы сайтов, на которые ведут эти ссылки, интересны пользователям. Например, в 2010 году Мэтт Катс из Google заявил, что поисковая система обращает внимание на ссылки из соцсетей.
Зачем нужны nofollow:
Четких рекомендаций по количеству и соотношению нет. Все, что говорят поисковики: меньше спама и коммерческих анкоров. Ссылки плохого качества лучше удалять, SEO-ссылки закрывать nofollow для Яндекса или новыми рекламными атрибутами Google. За переспам ссылками можно получить санкции.
«Минусинск» — снижает позиции за переспам ссылками на страницах, если количество ссылок с коммерческими анкорами превышает 40% от общей ссылочной массы или на сайте всего более 500 покупных ссылок.
«Непот» закрывает учет покупных ссылок. Советуют ставить не более пяти внешних ссылок в одном блоке, чтобы не получить санкции.
«Пингвин» отменяет вес покупных ссылок.Фильтр
«Ссылочная помойка(Links)» наказывает за беспорядочную продажу ссылок со своих страниц. Допустимое количество ссылок — не более пяти на страницу.
Польский специалист Макс Сайрек три месяца проводил эксперимент, который показал, что ссылочный вес не передается по ссылкам через JavaScript — onclick=»window.location.href =’page4.html'», хотя краулеры их воспринимают и переходят по ним.
Аналогично со ссылками через JavaScript-функцию — data-url=»page9.html». В этом случае почему-то страницу, на которую вела ссылка, краулер посещал чаще других в этой категории.
Бот Google игнорировал ссылки через JavaScript-функцию с закодированными данными — data-url=»cGFnZTEwLmh0bWw=» и ссылки с динамическим параметром — page2.html?parameter=1.
Также не передавала вес ссылка с якорем — page2.html#testhash, по запросу анкора в индексе страница не появилась.
