Сопли Гугла или дополнительный индекс
Какую-то часть страниц любого сайта поисковая система Гугл считает важными и помещает в основной индекс. Такие страницы участвуют в ранжировании по запросам и формируют поисковую выдачу. Но у Google имеется и дополнительный индекс, так называемые «сопли гугла» или «Supplemental Index», в который помещаются страницы сайта, которые алгоритм посчитал не важными, либо нарушающими правила и недостойными основного индекса по каким-либо причинам.
Каждая новая статья любого веб-сайта проверяется поисковой системой Google на предмет соответствия критериям основного индекса. При этом обсчитывается масса параметров и учитывается история ресурса. Если за сайтом уже были замечены те или иные нарушения, проверка производится более тщательно и риск попадания новых страниц в supplemental index растёт.
Чем больше страниц блога или сайта попадает в сопли, тем меньше трафика с гугла имеет ресурс, так как подобные страницы не участвуют в поиске. Часто причиной просадки трафика и потери позиций является именно массовый перевод страниц сайта из основного в дополнительный индекс за какие-либо нарушения. Задачей вебмастера является уменьшение количества страниц, попавших в дополнительный индекс.
Основные причины попадания страниц в сопли- Дублированное содержание (дубли)
- Неуникальный контент
- Отсутствие Title, Descriptin
- Минимальное количество контента на странице
- Явное отклонение страницы от основной темы сайта
- Изменение структуры URL ресурса
- и т.д.
Способы проверки сайта на наличие страниц в дополнительном индексе сильно разнятся, опишу только чем пользуюсь сам. Во-первых, посмотреть страницы в основном индексе можно с помощью следующего запроса в Гугл: site:ваш сайт/& То есть для этого блога запрос будет выглядеть таким образом: site:comp-on.ru/&
Вы вставляете вместо comp-on.ru домен своего сайта соответственно. Как видим на картинке, по этому запросу найдено 194 результата, что примерно соответствует количеству опубликованных статей на этом блоге. Из этого можно сделать вывод, что почти все статьи блога находятся в основном индексе Гугла.
Для того, чтобы увидеть все страницы сайта:site:ваш сайт
То есть для этого блога запрос будет — site:comp-on.ru
Разница между страницами в основном индексе и всеми проиндексированными страницами сайта это и будут сопли.
Теперь проверим на сопли случайный блог из Сети. Банально взял первый попавшийся блог inetrab.ru
Конструкция вида site:ваш сайт -site:ваш сайт/& — больше не работает!
Пользуйтесь определением основного и полного индекса. Как это сделать написано выше.
Проверка на дополнительный индекс
Результат — более 50 000 страниц (адресов). Я не углублялся в изучение этого сайта, но здесь скорее всего проблема с дублями контента, отсюда и такое количество страниц в дополнительном индексе. Можно предположить, что к этому сайту уже применяются санкции, либо они будут скоро применены, вплоть до исключения всего ресурса из основной выдачи Google.
Примерное соотношение страниц сайта, участвующих в основном и дополнительном индексе, можно увидеть с помощью RDS бара
В процентах количество страниц сайта в основной выдаче, по отношению к общему количеству проиндексированных страниц.
Проблема с сопливыми страницами сайта ещё и усугубляется тем, что робот посещает данные странички крайне редко, и даже исправив все нарушения либо полностью удалив эти страницы, можно ещё полгода ждать исправления ситуации, когда бот соизволит посетить эти урлы, а потом ещё некоторый период пока обновятся данные в кэше. И только после этого алгоритм начнёт оценивать ваш сайт с позиции того что нарушения исправлены. Для удаления из индекса Гугла ненужных страниц можно воспользоваться «инструментами для веб-мастеров» от поисковой системы Google.
При наполнении сайта надо стараться, чтобы как можно большее количество страниц были качественными и попадали в основной индекс, а не уходили в сопли. Вовремя исправлять нарушения и недочёты.
Как я повторял уже много раз, каждое нарушение любого отдельно взятого сайта учитывается поисковиками и складывается в историю ресурса. Когда количество нарушений сайта переходит за какой-то определённый установленный рубеж — следует наказание, обычно в виде сильной пессимизации или бана. Не стоит доводить свой ресурс до таких проблем.
Среди сеошников давно ходит байка о том, что у гугла нет никаких соплей да и сами представители этой поисковой системы якобы заявляли об этом. Однако с помощью запросов, которые были представлены в этой статье, данные утверждение легко опровергается. Никто не говорит, что в гугле это называется именно соплями, однако суть от этого не меняется — подобные страницы не участвуют в поиске, соответственно не приводят посетителей, и часто являются причиной пессимизации либо бана сайта. А называть это можно как угодно.