Вес страницы и передача PageRank со ссылкой. Объяснение nofollow, ugc и sponsored

Никто не отказался бы узнать, сколько веса передает и рассеивает каждая ссылка. И пока мы силимся угадать пропорцию, гуглбот хихикает украдкой, читая, что «каждая исходящая ссылка отбирает у донора 10–15% веса».

Начнем с того, что точного веса у страницы нет, если не говорить о размере загруженных ресурсов. Есть сравнительная ценность по отношению к другим страницам. Эта ценность (значимость, вес) передается между сайтами с помощью гиперссылок, т.к. поисковик воспринимает ссылку как голос в пользу цитируемой страницы.

Поисковые системы вычисляют значимость веб-страниц с учетом сотен факторов, многократно уточняя результат. Однако Google, Bing, Yandex, Baidu и пр. делают это по-своему, и точной формулы веса мы никогда не узнаем. Хотя известно, что началось все с этой рекуррентной формулы ранга страницы (если не желаете вспоминать этот кошмар из детства, жмите сюда):

где PR (A) – PageRank страницы A, а d – коэффициент затухания (≈ 0.85), который в формуле умножается на сумму по всем ссылкам на A.  Каждое слагаемое представляет собой частное от деления ранга ссылающейся страницы Q  на количество ее исходящих ссылок. Хотя выражение в ходу в Интернет, вряд ли Google слишком на него полагается. Иначе N «карманных» сайтов, ссылаясь друг на друга, могли бы повысить ранг отдельных страниц.

В тексте обновленного патента PageRank приведены вариации первой формулы, оценивающие «расстояние» от A  до множества избранных («сеянных») страниц. К тому же в новых уравнениях учтены коэффициенты значимости каждой отдельной ссылки. Величины их знает только Гугл, мы же можем лишь предполагать, что и как влияет на весомость ссылок.

Попробуем разобраться? Начнем с простого.

Почему исходящие ссылки отбирают вес?

Потому что любая ссылка будто бы говорит: «Не задерживайся здесь, загляни сюда».

Почему внешние ссылки добавляют авторитета?

Потому что разместившая ссылку страница будто предлагает: «Очень рекомендую вот это».

Почему ссылки с nofollow не передают вес?

Потому что значимость не передается вслепую. Если бот не проверит, что находится по ссылке, то не сможет и оценить, на достойный ли ресурс отправляют пользователя.

Но раз уж ботам разрешили игнорировать nofollow...

Robot by Rock'n Roll Monkey on Unsplash. Modified with befunky.com

Если редиректы идут цепочкой, поисковик попытается определить каноническую страницу: ей и достанется значимость. Но чем длиннее цепь редиректов, тем меньше шансов, что канонической будет признана нужная страница. То есть весь вес может не дойти по назначению.

✽ ✽ ✽

Казалось бы, все просто, можно заканчивать... Но нет, разговор только начинается! На деле исходящие ссылки способны добавить важности, а входящие – наоборот, подмочить репутацию. К последним относятся ссылки с «помоек», к которым вот-вот будут (или уже) применены санкции поисковых систем. Если токсичных внешних ссылок много, лучше их отклонить: Bing и Google предоставляют для этого Disavow tool в панели вебмастера.

Предлагаю с этого момента забыть про формулы и полагаться только на здравый смысл. Каждый тег

<a href="url-адрес" rel="инструкция"> анкор </a>

влияет на значимость и донора, и реципиента сложным образом. Каким именно – попробуем разобраться.

Ссылки на другие сайты: вредны или полезны?

Делиться весом с другими ресурсами бывает жалковато, поэтому многие стараются избегать ссылок «наружу» либо устанавливают им атрибут rel="nofollow". В чистом виде обе стратегии ни к чему хорошему не приводят. Исходящие ссылки не так страшны, когда понимаешь, как они работают.

Вы делитесь значимостью без выгоды, а то и с ущербом для себя, если:

• ссылаетесь на подозрительный или существенно менее авторитетный ресурс;
• анкором ссылки является ключевое слово, под которое вы тщательно оптимизировали свою страницу;
• ссылка подана в таком контексте, что на нее, скорее всего, кликнут и не вернутся («у нас фото маловато, а вот тут полно»);
• ссылка размещена в меню или сайдбаре:
  • во-первых, сквозные ссылки наружу поисковые системы не одобряют;
  • во-вторых, ссылка из меню означает, что весом жертвует не одна, а все ваши страницы.

Делясь весом, вы приобретаете доверие и репутацию, если:

• ссылаетесь на признанных авторитетов в отрасли или вообще в сети;
• создаете контент, мегаполезный для пользователя (рейтинг бесплатного софта);
• завязываете добрые отношения с тематическим сайтом, чьей аудитории может быть полезен ваш контент;
• предоставляете пользователю список онлайн-ресурсов, которые пригодятся ему на следующем этапе.

Вряд ли один сайт удовлетворит все будущие потребности пользователя: он уйдет, но будет благодарен за напутствие. Впоследствии, увидев знакомый логотип в результатах поиска, лояльный юзер не колеблясь перейдет на сайт.

Когда необходимо сослаться, не считаясь с ценой:

1. Когда используете чужой контент по лицензии, требующей атрибуции.
2. Когда переводите иноязычные материалы.
3. Когда обсуждаете освещенное в сети событие или чье-то высказывание.

Речь не только об этике, но и о том, что поисковая система вряд ли поймет отсутствие ссылки в данных случаях.

До сих пор мы говорили, в основном, о ссылках вовне и обратных ссылках – бэклинках. Но внутренние ссылки тоже важны: они способны кардинально перераспределить вес на сайте. Внутренний PageRank страниц вычисляют некоторые краулеры: из облачных назовем Oncrawl, из десктопных – Netpeak Spider. Вообще, внутренняя перелинковка – основа оптимизации сайта, но разговор об этом требует отдельной статьи.

Как предотвратить утечку веса с сайта и не переборщить с nofollow

При бездумном использовании nofollow только дезориентирует ботов и сводит к нулю пользу исходящих ссылок. Поэтому применяем rel="nofollow" избирательно, только чтобы избежать потерь PageRank.

• На внутренних ссылках на неиндексируемые страницы (поиск на сайте, сортировку и пр.). Это сбережет не только вес, но и усилия поисковых ботов – краулинговый бюджет.
• Когда нельзя поручиться за цитируемый ресурс репутацией. Например, если ссылка размещена пользователем.
• На ссылках из виджетов, счетчиков и пр. чужеродных элементов, если есть возможность редактировать код.
• На кнопках шеринга в соцсетях.
• Если ссылка выгодно расположена на странице, но указывает на архив или другой технический ресурс, который в весе не нуждается и не является авторитетом. Альтернатива nofollow – вынести такие ссылки со сносками в футер.

NB! rel = nofollow – не 100%-ная защита от сканирования ботом (и уж точно не защита от попадания в индекс). Нежелательные внутренние адреса можно продублировать в robots.txt, но если цель – запретить их индексацию, то сделать это лучше надежным способом.

Если на некой «тупиковой» странице большинство ссылок ведет туда, куда ботам лучше не заглядывать, можно воспользоваться тегом <meta name="robots" content="nofollow" />. Он размещается в блоке <head> и запрещает ботам переходить по ссылкам страницы. Причем в отличие от атрибута nofollow, запрещает строго.

Не используем rel="nofollow" без разбору.

• Для всех исходящих ссылок: каждый случай стоит рассматривать отдельно.
• Ссылаясь на первоисточник информации или профиль автора цитаты.
• Для «скульптурирования ранга» – перераспределения ссылочного веса у себя на сайте.

В любой непонятной ситуации придерживаемся золотого правила: «Не стой на пути поискового бота, не имея на то весомых причин!»

Что означают Sponsored и UGC и чем отличаются от Nofollow

К широко поддерживаемой поисковиками директиве nofollow и ее антиподу dofollow в сентябре 2019 прибавились две нестрогие инструкции для Google ботов.

Это значения аттрибута rel тега link: rel="ugc" и rel="sponsored". Оба – лишь подсказки: робот может принять их во внимание, но не обязан. User Generated Content, или UGC – созданный пользователем контент: комментарии, отзывы, посты и обсуждения на форумах. Sponsored – аффилированные и платные ссылки, реклама.

UPD! Летом 2020 Bing подтвердил, что его поисковые боты поддерживают введенные Гуглом подсказки sponsored и ugc в атрибуте rel ссылки.

Designed by Freepik

В официальном анонсе сказано, что новинки не вытесняют привычный nofollow. Цель нововведения – предоставить инструмент для владельцев сайтов, которые решат помочь Гуглу понять природу ссылок. Применение ugc и sponsored – дело добровольное.

Подсказки можно комбинировать. Добавим ugc к nofollow – выйдет rel="ugc nofollow": пользовательский контент, на который боту не стоит обращать внимания. Явно аффилированная ссылка от юзера может быть представлена как rel="ugc sponsored". Справка Google утверждает, что в подходящих ситуациях sponsored предпочтительнее nofollow. И намекает, что ugc тоже включает в себя запрет перехода по href. Однако...

Для нас безопаснее считать, что ни ugc, ни sponsored сами по себе НЕ ДЕЛАЮТ ссылку nofollow. Хотя бы потому, что другие поисковики их не понимают.

Этот A/B тест подтверждает, что не стоит отказываться от nofollow там, где он на своем месте: Moz.com/blog рассказал об эксперименте по замене "nofollow" на "ugc" на половине ссылок из комментариев.

Результатом стало снижение трафика. В ходе анализа было показано, что с вероятностью 95% месячная посещаемость остается в пределах от -26 тыс. до +9,3 тыс. человек. Не страшно, но перевес возможных потерь налицо.

Подытожим. Новые подсказки ограничивают передачу веса, и в большей степени это касается sponsored. Однако основным методом контроля PageRank по-прежнему остается nofollow. Если не возникает желания подсказывать ботам, на сайте можно вообще ничего не менять. Гугл утверждает, что и без подсказок разберется, где реклама, где спам, а где полезные ссылки, оставленные с заботой о пользователе.

Типы веса страницы  Раздел, которого не было бы, если б не SEO

Здесь мне придется рассказать о различиях между статическим и динамическим весом; о том, как узнать Page Rank онлайн и пр. Почему придется? Потому что сайты, ранжирующиеся по «вес страницы» и т.п. запросам, всё это подробно описывают. Если я не сделаю того же, поисковику будет сложно понять, что эта статья на ту же тему.