Ошибки использования robots и X-Robots-Tag
Несогласованность с файлом robots.txt
В официальных справках по X-Robots-Tag и метатегу robots в Google и Яндексе сказано, что у поискового робота должен быть доступ к сканированию контента, который нужно скрыть из индекса. В этом случае указание директивы disallow для определенной страницы в файле robots.txt делает невидимыми директивы страницы, в том числе запрещающие индексацию.
Еще одной ошибкой является попытка запретить индексацию страниц с помощью robots.txt. Основная функция robots.txt — в ограничении сканирования, а не запрете индексации. Следовательно, для управления отображением страниц в поиске нужно использовать метатег robots и тег x-robots.
Несвоевременное удаление атрибута noindex с актуальной страницы
Если вы используете директиву noindex, чтобы временно скрыть контент из индекса, важно вовремя удалить ее со страницы и открыть роботу доступ. Например, это может быть страница с запланированным акционным предложением, которое уже вступило в силу
Или же станица, которая была в процессе разработки и теперь полностью готова. Если директиву не убрать, страница не появится в выдаче, а значит не будет генерировать трафик.
Наличие обратных ссылок на страницу с атрибутом nofollow
Команда nofollow может не сработать, если сама страница — не единственный способ для поисковика узнать об URL-адресах, и на них ведут внешние ссылки с «открытых» источников.
Удаление URL-адреса из карты сайта до его деиндексации
Если страница содержит директиву noindex или отдает запрет индексации URL, стоит ли ее удалить из файла sitemap.xml? Такое решение будет неверным, поскольку карта сайта дает роботу возможность быстрее находить все страницы, в том числе те, которые нужно убрать из индекса.
Правильным решением будет создать отдельный файл sitemap.xml со списком страниц, содержащих директивы noindex, и удалять URL оттуда по мере их деиндексации. Чтобы ускорить процесс обхода дополнительной карты сайта роботом, можно загрузить ее в Google Search Console или Яндекс.Вебмастер.
Отсутствие проверки индексации после внесения изменений
При самостоятельной настройке индексации или в ходе работы программиста бывают ситуации, когда важный контент ошибочно оказался под запретом индексации. После внесения изменений страницы сайта нужно проверять.
Как избежать ошибочной деиндексации важных страниц?
Кроме проверки индексации URL указанными выше способами, можно отследить изменения кода на сайте с помощью инструмента «Отслеживание изменений» в SE Ranking.
Как быть, если актуальная страница перестала отображаться в поиске?
Необходимо удалить директивы, запрещающие индексацию страницы, а также проверить, нет ли запрета ее сканирования командой disallow в robots.txt и указан ли ее адрес в файле sitemap. Запросить индексацию URL, а также уведомить поисковики об обновленной карте сайта можно через Яндекс.Вебмастер и Google Search Console.
Больше информации можно найти в статье о принципах индексации сайта в поисковиках.
rel = ”noreferrer” и SEO
Добавление тега noreferrer к вашим ссылкам не влияет напрямую на SEO. Вы можете безопасно использовать его, не беспокоясь ни о чем.
Но этот тег косвенно влияет на ваши усилия по созданию ссылок и продвижению, и причина в следующем:
Одним из способов привлечь внимание других веб-мастеров является ссылка на их сайты. Все веб-мастера ежедневно проверяют свою аналитику и особенно Источники трафика
Теперь вы можете подумать: «Зачем мне тогда лишняя работа, я просто не буду добавлять этот тег и конец истории».
Причина, по которой эта проблема стала популярной, заключается в том, что WordPress по умолчанию добавляет тег «noreferrer» ко всем исходящим ссылкам, которые настроены на открытие в «новой вкладке».
Разница между Nofollow и Noreferrer
Когда вы добавляете rel = ”nofollow” к внешней ссылке, вы в основном указываете поисковым системам, что не следует передавать «вес» с одной страницы на другую. Другими словами, вы говорите поисковикам игнорировать эту ссылку для целей SEO.
Разница между nofollow и noreferrer заключается в том, что noreferrer не передает справочную информацию в браузер, но «вес» передаётся. При использовании nofollow информация об источнике ссылки передается, но не «вес» ссылки.
Так что это не одно и то же. Используйте nofollow для ссылок на сайты, которым вы не доверяете, и используйте noreferrer, если вы не хотите, чтобы другой сайт знал, что вы сослались на него.
Мета-тег
Начнем с базовых пониманий. Мета-тег — это служебная информация для страницы, которая указывается в документе в верхнем блоке <head></head> с HTML разметкой.
Что такое мета-тег robots?
В нашем случае, мета-тег с атрибутом name=“robots” дает указание роботам всех поисковых систем, без исключения. Так же, есть name=“googlebot”, виден только Google, и name=“yandex”, соответственно только для Yandex поисковика.
В коде это выглядит так:
<!DOCTYPE html> <html><head> <meta name="robots" content="noindex" /> (…) </head> <body>(…)</body> </html>
Атрибут content может принимать такие параметры как:
- “noindex” — ставит запрет на индексацию контента, но ссылки в документе все еще видны для поисковых роботов и открыты для просмотров и переходов на них
- “nofollow” — закрывает все ссылки на данной странице от индексации. Это касается как внешних, так и внутренних.
Варианты использования meta тега robots с noindex и nofollow
Возможны такие варианты использования:
<meta name="robots" content="index, follow"/> <!-- — включена индексация страницы и ссылок. Стоит по умолчанию для каждого сайта. --> <meta name="robots" content="noindex, follow"/> <!-- — запрет на индексацию контента страницы, но разрешен переход и просмотр ссылок. --> <meta name="robots" content="index, nofollow"/> <!-- — включена индексация, но запрещен переход и просмотр ссылок. --> <meta name="robots" content="noindex, nofollow"/> <!-- — запрет на индексацию и переход по ссылкам страницы. -->
Перечисленные варианты также можно использовать для скрытия от определенных поисковых систем, таких как Yandex и Google. Возможные варианты атрибута name видно выше, а в коде это может выглядеть так:
<meta name="googlebot" content="noindex, follow" />.
Стоит подбирать комбинацию атрибутов четко под свои цели и задачи. Давайте рассмотрим некоторые из них.
Когда нам нужен мета-тег “robots” со значением “noindex” или “nofollow”?
Мета-тег следует использовать на следующих страницах:
- со служебной информацией(админ. панель, логи сервера);
- дублирующийся контент(пагинация, архивы, теги).
А также в случаях:
- когда следует закрыть страницу от индексирования, но оставить возможность просматривать ссылки;
- когда хотите удалить документ из index и не допустить просмотра ссылок поисковыми роботами;
- когда нужно закрыть переход по ссылкам уже индексированного документа.
Рекомендуем
Операторы поиска Google
Подробнее
Отслеживание внешних ссылок
Представим, что вы уже наполнили свой сайт полезным контентом и в частности расставили ссылки на авторитетные и релевантные ресурсы. Но это еще не вся работа со ссылками, ведь страницы, на которые они ведут, могут измениться или исчезнуть со временем.
Скрипты отслеживания в Google Analytics помогут понять, сколько трафика вы приносите сайтам, на которые ссылаетесь. Вы можете использовать эти данные, чтобы устанавливать связи для линкбилдинга и написания гостевых постов. А в Google Tag Manager можно создавать триггеры и отслеживать, какие исходящие ссылки открывают посетители вашего сайта.
Также важно регулярно проверять, чтобы внешние ссылки на сайте оставались рабочими. Битые линки могут навредить и удобству пользователей, и ранжированию сайта
Если поисковые роботы натыкаются на множество 404 ошибок, авторитет ресурса падает для поисковиков. Находя битые исходящие ссылки, вы можете связаться с ресурсами и узнать, что случилось с их страницами, заменить ссылки на более актуальные или же просто их удалить.
«Анализ сайта» в SE Ranking поможет определить все проблемы со ссылками. Раздел «Анализ ссылок» даст вам представление о том, сколько всего внешних ссылок на сайте и какие существуют проблемы (отсутствие анкорного текста, ошибки в ответах сервера).
Этот инструмент обнаружит, если на вашем сайте есть ссылки с кодом ответа 3** (означающем, что пользователи перенаправляются на другую страницу), 4** (битые ссылки) или 5** (ошибка сервера), а также если некоторые ссылки не имеют анкорного текста. Кроме того, вы можете просмотреть, у каких линков стоит атрибут nofollow, и при необходимости заменить его на UGC or Sponsored.
Любой список ссылок вы можете сохранить в xls-формате:
Помогают ли nofollow-ссылки в SEO?
Напомним, Google не передаёт PR и не учитывает анкорный текст таких ссылок. Всё, казалось бы, ясно, но есть пометка «In general, we don’t follow them», то есть «в целом, мы не переходим по ним». И это «в целом» вносит некоторую неопределённость. Возможно, в некоторых случаях поисковый робот всё-таки по ним переходит.
Есть специалисты, которые уверяют, что часть PageRank передаётся и по nofollow-ссылкам. Другие говорят, что только по некоторым из них. Третьи, возможно, самые разумные, считают, что мы слишком много внимания уделяем старым формулировкам.
Ранее Ahrefs изучили 44,589 результатов поисковой выдачи, чтобы выяснить, существует ли какая-то корреляция между ранжированием и наличием/отсутствием атрибута rel=”nofollow”. Вот, что у них получилось:
Здесь нас интересует два значения: «number of backlinks» (общее количество внешних ссылок) и «number of “dofollow” backlinks» (количество ссылок без атрибута nofollow).
Корреляция для вторых немного слабее, чем в случае общего количества бэклинков. Тим из Ahrefs считает, что это может указывать на то, что Google придаёт больше ценности nofollow-ссылкам с «сильных» страниц, чем dofollow-ссылкам со слабых. Кто знает?
Но даже если предположить, что нет никакого прямого влияния на SEO, то косвенное точно имеет место:
1. Nofollow-ссылки помогают разнообразить ваш ссылочный профиль, делая его более естественным. Кроме того, множество ссылок на ваш сайт, наверняка, именно с этим атрибутом:
-
Социальные сети (Facebook, VK, Twitter и так далее).
-
Форумы.
-
Пресс-релизы.
-
Wikipedia.
-
Каталоги и справочники.
Короче говоря, если бы ссылочный профиль состоял только из dofollow-ссылок, это было бы подозрительно для поисковых систем. Очень примерная норма — это от 60% до 90%.
2. По ссылкам приходит трафик. Именно поэтому не стоит пренебрегать размещением информации о своём сайте в тематических каталогах, делиться полезным контентом на форумах и даже попробовать получить ссылку с Википедии. Мы уже рассказывали о таком .
3. Nofollow защищают от санкций. Иногда покупка ссылок имеет смысл
Если у сайта-донора тонны трафика, то это довольно простой способ обратить внимание на свой сайт
SEO-лагерь снова разделился:
-
Те, кто считает, что Google может идентифицировать купленные ссылки алгоритмически.
-
Те, кто считает, что точно не может.
Дебаты не утихают, но важно другое — у Google есть инструмент, который позволяет пожаловаться на какой-либо сайт за продажу или покупку ссылок
И, вполне возможно, вам следует опасаться не санкций Google, а недобросовестных конкурентов.
Значения атрибута «rel=»
Если мы говорим об атрибуте rel, то чаще всего под ним подразумевается использование значения «nofollow», но есть и другие не менее важные значения.
rel=nofollow
Используется, когда нужно, чтобы страница, на которую ссылается пользователь, не увеличила свой ссылочный вес благодаря этой ссылке. Другими словами, по этой ссылке не передается индекс цитирования, используемый Яндексом, и PageRank, используемый Google.
<a rel="nofollow" href="index.html">Эту страницу не нужно посещать</a>
Использование такого значения оправдано на сайтах с формами для комментариев: пользователи могут оставлять ссылки на некачественные ресурсы, а из-за этого сайт рискует потерять доверие поисковых систем.
rel=alternate
Используется для указания того, что ссылка ведет на альтернативное изображение страницы:
<a rel="alternate" type="application/pdf" href="page.pdf">Страница в формате PDF</a>
Также есть еще одна вариация:
...rel="alternate" hreflang="en"...
Она помогает поисковой системе понять геопринадлежность страницы, чтобы предоставить пользователю нужную языковую версию в результатах поиска. С ее помощью мы показываем поисковым роботам, что на сайте один и тот же контент доступен на разных языках. Благодаря этому поисковики могут автоматически показывать корректную языковую версию на основе географических и языковых данных.
<a rel="alternate" hreflang="en" href="english-version.html">English</a>
rel=canonical
Указывает на предпочитаемый адрес, который будет участвовать в поиске. Используется в теге <header>:
<link rel="canonical" href="http://www.example.com/">
rel=author
Указывает на то, что приведенная ссылка относится к информации об авторе данной страницы или статьи.
<a href="/author-page.html" rel="author">link text</a>
rel=bookmark
Обозначает, что эта ссылка является якорем и ведет на какую-то часть в этом же документе. Также она говорит поисковым системам, что эта ссылка постоянная.
<a rel="bookmark" href="about.html">Постоянная ссылка на страницу</a>
rel=help
Такое значение используется для обозначения справочников. Браузер сопоставляет эту справочную информацию с родительским контейнером, в котором была размещена эта ссылка.
Например, в форме на сайте это прописывается через тег <a>:
<form id="form"> <label for="comment">Comment:</label> <textarea id="comment"></textarea> <input type="submit" value="Text Comment"> <a rel="help" href="comments.html">Help</a> </form>
rel=dns-prefetch, preconnect, prefetch, preload
Ссылки с такими значениями пригодятся в тех случаях, когда нужно сослаться на внешние ресурсы, которые пользователь откроет с большой вероятностью. Браузер кэширует эту ссылку заранее, поэтому она открывается быстрее:
<a rel="prefetch" href="license.html">Здесь что-то интересное</a>
rel=tag
Определяет категорию сайта или ключевой запрос:
<a rel="tag" href="search.html">Эта ссылка относится к странице с каталогом</a>
Этот тип сообщает, что ссылка ведет на интерфейс поиска:
<a rel="search" href="search.html">Поиск по сайту</a>
rel=icon
Необходим для того, чтобы связать содержимое сайта с иконкой:
<link rel="shortcut icon" href="/favicon.ico"></link>
rel=first, up, prev, next, last
Такие значения необходимо прописывать для тех ссылок, которые используются для навигации по странице. Они ведут в начало, конец, на предыдущую или последующую страницу:
<ul> <li><a rel="next" href="page-1.html">Первая страница</a></li> <li>Исходная страница</li> <li><a rel="prey" href="page-3.html">Последняя страница</a></li> </ul>
Атрибут «rel=»: определение и предназначение
Rel (от англ. «relationship» – отношение) – это атрибут HTML, описывающий ссылку. Он обозначает, что это за ссылка и на какой адрес она ведет. Работает это следующим образом: когда ссылка направляет пользователя на адрес, атрибут рассказывает поисковым системам, почему ссылка ведет на этот адрес. Например, ссылаться можно на файл стилей, который взаимодействует со страницей.
Еще ссылка может вести на PDF или иноязычную версию документа. Ссылка, как взаимосвязь между текущим и иным документом, часто используется в электронных книгах для переадресации на следующую или предыдущую страницу.
Современные браузеры чаще всего не обращают внимание на атрибут rel, но вот поисковые системы, напротив, уделяют этому пристальное внимание. Кроме того, социальные сети будут лучше взаимодействовать с веб-ресурсом, если его ссылки будут определены
Атрибут rel может использовать вместе с тегом <a>:
<a rel="..." href="...">...</a>
Также допустимо его появление и в теге <link>:
<link rel="..." href="...">
Преимущества тега noindex и атрибута nofollow
Некоторые полезные свойства тегов мы уже обсудили выше, но на эту тему можно сказать больше.
- Теги помогают сделать информацию на сайте более релевантной за счет вычленения из нее неуникального и разного рода утилитарного контента, который никак не связан с данными для посетителей. Не только пропадает текст, понижающий общую уникальность, но и увеличивается плотность вхождения ключевых слов.
- Тегами можно спрятать информацию из сквозных блоков, которые часто воспринимаются роботами как дубликаты данных.
- Я уже упомянул выше, что за тегом <noindex> частенько прячут контактную информацию, но не пояснил зачем. Дело в поисковых сниппетах Яндекса и Google, в которые ненароком могут попасть номера телефонов и адреса, указанные на другом сайте или закрепленные за другой компанией в Яндекс.Справочнике.
- Атрибут nofollow может прятать платные ссылки. Рекламные статьи, заметки и обзоры, размещенные на странице. Поисковикам запрещают переход по ним, чтобы избежать санкций со стороны Google или Яндекса.
- Еще nofollow нужен для распределения приоритетов сканирования. Чтобы в него не попадали всякие формы регистрации и прочие технические страницы. Сканирование этой информации никакой пользы не принесет.
Выше мы использовали <noindex> и nofollow в качестве мета-атрибутов, чтобы задать свойства всей странице целиком. Посмотрим, как разрешить для роботов весь контент и все ссылки:
<meta name="robots" content="index, follow"/>
А это полный запрет на контент и ссылки:
<meta name="robots" content="noindex, nofollow"/>
Данный тег спрячет от ботов страницу целиком, но то же самое можно сделать, указав соответствующую ссылку в графе Disallow файла robots.txt, который отвечает за «исключение» страниц из индексации.
Но способы отличаются тем, что мета-тег разрешает поисковикам заходить на сайт и анализировать его содержимое. А вот если ссылка указана в robots.txt, то бот не сможет на нее зайти и провести индексирование.
Во избежание неадекватного поведения ботов, на уже проиндексированных страницах лучше использовать мета-теги, а в robots.txt заносите новые ссылки, неизвестные для Google и Яндекс.
Тег noindex и атрибут rel=“nofollow”
Тег <noindex> для ссылок
Данный тег можно использовать для закрытия ссылок от индексации. Вот так это будет выглядеть в коде страницы:
для ссылок
<noindex><a href=»http://site.com/»>текст ссылки</a></noindex>
| 1 | <noindex><ahref=»http://site.com/»>текстссылки<a><noindex> |
Тег <noindex> для контента
Данный тег можно использовать и для закрытия контента от индексации. Существует два способа. В коде страницы это будет выглядеть так:
для контента — вариант 1
<noindex>Текст, запрещённый к индексированию</noindex>
| 1 | <noindex>Текст,запрещённыйкиндексированию<noindex> |
для контента — вариант 2
<!—noindex—>Текст, запрещённый к индексированию<!—/noindex—>
| 1 | <!—noindex—>Текст,запрещённыйкиндексированию<!—noindex—> |
Но стоит помнить, что данный тег понимают только поисковые системы Яндекс и Рамблер. Его свойства не распространяются на Google. Поэтому, если на вашем сайте есть некачественный контент, закрыть его таким способом можно только от роботов Яндекса и Рамблера.
rel=”nofollow” для ссылок
Данный атрибут, чаще всего, используется оптимизаторами в том случае, если они хотят, чтобы поисковые системы не учитывали наличие исходящей ссылки, как фактор передачи веса, но ссылка всё равно будет изучена роботом. Вот как это выглядит в коде:
rel=”nofollow”
<a href=»http://site.com/» rel=»nofollow»>текст ссылки</a>
| 1 | <ahref=»http://site.com/»rel=»nofollow»>текстссылки<a> |
https://support.google.com/webmasters/answer/96569?hl=ruhttps://yandex.ru/support/webmaster/controlling-robot/html.xml?lang=ru
Передает ли nofollow-ссылка вес
Если вы внимательно прочитали информацию по указанным выше ссылкам, теперь вы знаете, что вес по nofollow-ссылке не передается. Но из практики, мы можем смело сказать, что наличие таких ссылок в ссылочном профиле – очень полезный и достаточно естественный фактор в глазах поисковых систем. Но иметь много исходящих ссылок на своем сайте может быть негативным фактором, даже если они закрыты через данный атрибут.
Нужно ли использовать rel=”nofollow” для внутренних ссылок
Для того, чтобы сквозные ссылки, например на страницу регистрации или входа в личный кабинет не отнимали вес у других страниц, и не передавали его бесполезно, можно использовать rel=”nofollow”.
Как использовать совместно тег <noindex> и rel=”nofollow”
Вот пример кода, когда оптимизаторы используют тег <noindex> и атрибут rel=”nofollow” одновременно:
«совместно
<noindex><a href=»http://site.com/» rel=»nofollow»>текст ссылки</a></noindex>
| 1 | <noindex><ahref=»http://site.com/»rel=»nofollow»>текстссылки<a><noindex> |
Но этот метод полноценно работает только для роботов Яндекса. Google понимает только лишь rel=»nofollow»>.
Гармония ссылок: соотношение dofollow и nofollow
Разберемся, есть ли рекомендации по количеству dofollow и nofollow ссылок или их процентному соотношению, чтобы поисковики не посчитали сайт нарушителем.
Количество ссылок на странице
По общему количеству ссылок у поисковиков нет четкой допустимой цифры. Рекомендации похожи и касаются качества — не надо спама, манипуляций ссылочным весом, обилия коммерческих анкоров. Некачественные ссылки рекомендуют удалять, покупные закрывать nofollow, чтобы не передавать PR и не пытаться повлиять на ранжирование.
Санкции Яндекса за ссылки
«Минусинск» понижает позиции за большое количество SEO-ссылок на страницах, если ссылок с коммерческими анкорами более 40% от общей ссылочной массы или покупных ссылок больше 500 на весь сайт.
«Непот» борется с недобросовестной покупкой ссылок и закрывает их учет. Чтобы избежать санкций, советуют размещать не более пяти внешних ссылок в одном блоке.
О других фильтрах Яндекса подробнее в статье.
Санкции Google за ссылки
«Пингвин» обнуляет влияние спамных ссылок и накладывает ручные санкции за переспам анкоров.
Фильтр «Ссылочная помойка (Links)» повлечет наказание за неразборчивую продажу ссылок на своих страницах. Рискуют сайты, на одной странице которых есть более пяти внешних ссылок, особенно если они не связаны тематически. В по снятию фильтра есть совет изменить такие ссылки, чтобы они не влияли на PR — поставить rel=”nofollow”.
Есть и другие санкции за ссылки, они по большей части касаются спама и ссылочного соседства с некачественными сайтами. Подробнее в статье «Фильтры Google».
Рекомендации по итогу:
- подбирайте только тематические ссылки для размещения на странице;
- задайте nofollow рекламным ссылкам, чтобы не направлять на них свой PR;
- ссылок с коммерческими анкорами на сайте не должно быть больше 40%;
- размещайте не более пяти внешних ссылок в одном блоке;
- не переборщите с количеством dofollow-ссылок, если поисковик посчитает, что больше пяти не подходят по тематике, будут санкции;
- остальным ссылкам в контенте задайте nofollow;
- задайте nofollow всем пользовательским ссылкам в комментариях.
Остается вопрос — сколько ссылок можно сделать nofollow, могут ли они повредить репутации страницы или сайта?
Как количество nofollow-ссылок влияет на страницу
Некоторые веб-мастеры переживают, что какое-то большое количество ссылок с nofollow, находящихся на странице, может повредить ей. По словам Гари Илша, сотрудника Google, внутренние nofollow-ссылки не снижают ценность страницы, на которой они присутствуют.
Тем не менее, другой сотрудник поисковика Джон Мюллер не советует делать nofollow все ссылки из расчета сохранить PR. Распределение таких ссылок относительно dofollow должно быть естественным:
«Закрывать все атрибутом nofollow не лучшая идея, поскольку это выглядит неестественно. Со временем этом может плохо сказаться на продвижении сайта. И, наоборот, использование обычных исходящих линков показывает Google, что ресурс является органической частью всемирной сети. Мы это ценим».
Соотношение dofollow и nofollow
Точных данных о рекомендуемом процентном соотношении dofollow и nofollow ссылок найти не удалось.
Чаще всего на сайте с санкциями «Пингвин» от Google содержится около 90-95% dofollow ссылок, но это не единственная причина санкций — важнее скорость появления ссылок, их качество и вид анкоров.
На форумах мы встречали советы от юзеров про то, что ссылок dofollow не должно быть больше 80%: 80% или 75% dofollow и соответственно 20% или 25% nofollow. Данные не подкреплены экспериментами или заявлениями представителей ПС, опыт некоторых оптимизаторов показывает, что такое соотношение ссылок оптимально.
Примеры ответов пользователей на вопрос о соотношении ссылок
Как внешние ссылки влияют на SEO?
Влияние исходящих ссылок на UX очевидно: если в текст включены релевантные линки, пользователи смогут легко узнать больше о вопросе, что их заинтересовал. Благодаря внешним ссылкам вы также увеличиваете степень доверия к своему сайта, ведь если вы упоминаете какие-то факты или статистические данные, пользователи должны иметь возможность проверить их.
А как поисковики воспринимают внешние ссылки, которые вы используете? Во многом поисковые системы ориентированы на удобство и пользу для юзеров. Ссылки на внешние ресурсы могут помочь вам в таких целях:
- Расширить сферу влияния и создать условия для обмена ссылками. Ставя ссылку на другой сайт на своей странице, вы создаете возможность установить связи для линкбилдинга. Например, если вы пишете подборку лучших приложений для продуктивности и ссылаетесь на сайт каждого, вы сможете написать их представителям и попросить упомянуть вашу статью в новостных рассылках или соцсетях. Точно так же и с обратной стороны: если вы работаете над сайтом такого приложения, вы можете связаться с медиаресурсом, на который ссылались, и попросить упомянуть ваш продукт в ответ.
- Сделать свой сайт более значимым для поисковых систем. То, какие ресурсы ссылаются на вас и на какие ставите ссылки вы, помогает поисковикам определить степень авторитетности сайта. Чем больше доверия вызывает ваш контент, тем больше шансов попасть в ТОП.
- Улучшить поисковые позиции сайта. Хотя официально задокументированной связи между внешними ссылками и высокими позициями в поиске нет, они являются одним из важных факторов ранжирования. Исследование Reboot, проведенное в 2016 и повторенное в 2020 году, подтверждает, что релевантные внешние ссылки на авторитетные сайты позитивно сказываются на результатах ранжирования.
Когда внешние ссылки могут навредить продвижению?
Получать выгоду от внешних ссылок можно только при правильном их использовании — то есть если вы внимательно анализируете, что стоит добавить в свой контент, и всегда проверяете источники, на которые собираетесь ссылаться. В каких же случаях внешние ссылки могут навредить сайту?
- Когда вы ссылаетесь на спамные сайты. Ресурсы, переполненные линками и рекламой, не располагают пользователей к себе и не воспринимаются поисковиками как полезные.
- Когда ссылок слишком много. Мы вернемся к вопросу количества немного позже, но в целом если на странице неестественно много ссылок, это раздражает и читателей, и поисковые системы.
- Когда вы занимаетесь масштабным обменом ссылок. Раньше сети бэклинков помогали сайтам быстро нарастить свою значимость в поиске независимо от качества контента и структуры сайта. Сейчас это так не работает: после запуска алгоритма Panda от Google в 2011 году, схемы активного обмена ссылками перестали помогать в ранжировании, и могут только навредить сайту. Чрезмерный обмен бэклинками считается одной из схем, за которые поисковики могут наложить санкции, так что никогда не ставьте на свой сайт ссылки просто ради обмена ними.
Как выявить и отклонить плохие ссылки?
Шаг № 1. Проведите ссылочный аудит
В ссылочной профиле смотрим на 3 вещи:
- Ссылающиеся домены
- Региональность доменов
- Анкоры ссылок
- Динамика роста
- Место расположение ссылки на странице (это вообще мало кто делает)
Prowebagents рекомендует обращать внимание на динамику прироста ссылок, чтобы проверить наличие неестественного всплеска роста ссылочной массы на сайт
Важно понимать, что всплеск может быть и естественным (не спамным), если на сайте опубликован вирусный материал, который привлек внимание аудитории и запустил процесс линкбейтинга (не путайте с линкбилдингом)
Шаг № 2. Проведите подробный аудит ссылок
С помощью выгрузки данных из:
- Панелей веб-мастеров
- Ссылочных бирж/Автоматических систем продвижения
- Сервисов по мониторингу ссылок
Например, в Ахрефсе можно выгрузить все ссылающиеся домены и обратить внимание на 2 важных аспекта:
- Доноры с низким значением показателя DR (что-то типа показателя траста сайта)
- Доноры в нерегиональных доменных зонах
При этом, если с одного домена-донора проставлено несколько бэклинков, и один из них плохой, то не нужно отклонять весь домен-донор через Disavow Links Tool, а отклоните только страницу-донора, на которой размещена такая плохая ссылка.
Вы можете отмечать плохие домены-доноры для дизавуирования, например, в электронной таблице на Google Drive или непосредственно в Ahrefs, установив флажки и нажав «Disavow Domains» рядом с теми доменами, которые вы хотите добавить в список для отклонения.
Если же вы хотите восстановить площадки-доноры, которые отправили на отклонение, то процесс прост (если бы это было так же просто в Google:)).
Шаг 3. Отформатируйте и загрузите файл-отклонения в Disavow Links Tool
В справке Google подробно расписан процесс отказа от ссылок через Google Search Console.
Что важно учесть при отклонении ссылок через Google Disavow Link Tool?
- Если ранее отправлялся файл со ссылками для отклонения, то нужно выгрузить все ранее отравленные файлы, чтобы выгрузить и вставить все доноры их них в новый общий файл, который заменит все отравленные ранее.
- Отправляя на отклонение ссылки через этот инструмент Google, вы не удаляете их физически с ресурсов-доноров, а исключаете возможность их влияния на ранжирование. Эти ссылки будут показываться в списке внешних ссылок панели Google Search Console.
- Применяйте этот инструмент только в тех случаях, когда другими способами устранить влияние плохих ссылок не получается. Например, вы отправляли электронные письма владельцам сайтов-доноров, на которых размещены некачественных ссылки, но ответа так и получили.
- Используйте его еще только в том случае, если вы уверены, что плохие ссылки негативно сказываются на ранжировании вашего сайта. Например, вы получили уведомление в панели веб-мастера Google о применении ручных мер за манипулирование ссылками или самостоятельно провели меры по закупке бэклинков, после чего позиции по продвигаемым ключам и/или трафик из поиска просели.
- Отправил файл-отклонения, отправлять запрос на пересмотр сайта в Google не нужно. Ссылочные санкции будут сняты автоматически после обработки отправленных на отклонение ссылок, если они являются действительной причиной ухудшения ранжирования.
- Отправленный файл на отклонение обратных ссылок с доноров обрабатывается не сразу. Для это нужно немного времени — минимум от 2 недель.
Шаг 4. Зафиксируйте изменения и отслеживайте процесс
Как я говорил, может потребоваться минимум несколько недель для того, чтобы увидеть эффект от отклонения ссылок. Google должен повторно обойти доноров с отклоненными ссылками, чтобы скорректировать оценку ссылочного профиля сайта.
