Что такое «Раздувание индекса»
У сайта может быть 300 товаров и 40 статей, а в поиске — 15 тысяч адресов. Большая часть из них — вариации одних и тех же страниц с разными параметрами. Поисковик вынужден их сканировать и оценивать, тратит на это краулинговый бюджет и в итоге видит сайт как собрание однотипных малополезных страниц. Важные страницы обновляются в индексе медленнее, а в выдаче вместо нужной карточки иногда показывается её дубль с параметром.
Откуда берутся лишние страницы
- Сортировки, фильтры и фасетная навигация: каждая комбинация параметров даёт новый адрес.
- Пагинация, версии для печати, страницы поиска по сайту.
- В 1С-Битрикс — параметры вида
?PAGEN_1=,?print=Y, страницы с?sort=в каталоге. - В WordPress — архивы меток, авторов и дат, отдельные страницы вложений на старых сайтах.
- UTM-метки и другие параметры из рекламы и рассылок.
Как найти проблему
Сравнить три числа: сколько полезных страниц на сайте, сколько адресов в карте сайта и сколько страниц в индексе по данным Search Console и Яндекс Вебмастера. Если индекс в разы больше, выгрузить список проиндексированных адресов и сгруппировать по шаблонам: сразу видно, какой параметр или раздел даёт основную массу мусора.
Пример правил для robots.txt
User-agent: Yandex
Clean-param: sort&order /catalog/
Clean-param: utm_source&utm_medium&utm_campaign
Disallow: /search/
Disallow: /*?print=Y
User-agent: *
Disallow: /search/
Disallow: /*?print=Y
Директива Clean-param понятна только Яндексу: она сообщает, что параметры не меняют содержимое, и робот склеивает такие адреса с основным. Для Google запрет в robots.txt останавливает сканирование, но не удаляет уже проиндексированные страницы. Поэтому лишние адреса, которые нужно убрать из индекса, сначала помечают noindex или каноническим тегом, дают роботу их переобойти и только потом при необходимости закрывают от сканирования.
Чистка индекса не делается одним действием: после правок результат виден через недели. Подробнее о поиске дублей — в статье о дублях страниц на сайте.
Связанные термины
Обновлено: 10 октября 2026

