Иногда лучший способ поднять сайт — удалить половину страниц

Лучший способ поднять сайт нередко состоит в том, чтобы удалить половину страниц, — и это не парадокс, а прямое следствие того, как поисковые системы оценивают ресурс. Владелец добавляет карточки, пишет статьи, закупает ссылки, а трафик стоит на месте. Первый вопрос обычно звучит «что ещё добавить». Правильный — что убрать. Ниже разберу механику: почему объём перестал работать рычагом, как отличить балласт от рабочих страниц и как провести чистку, не потеряв то, что приносило переходы.

Почему больше страниц не значит больше трафика

Убеждение, что каждая новая страница — это дополнительная точка входа, сложилось в те времена, когда поиск оценивал документы поштучно. Сейчас оценка идёт на уровне сайта целиком. Система формирует представление о том, какого качества ресурс перед ней, и это представление влияет на все его страницы разом, включая хорошие.

Отсюда простая арифметика. Если из тысячи страниц восемьсот пустые, дублирующие друг друга или созданные «чтобы было», система видит не восемьсот дополнительных возможностей, а сайт, у которого четыре пятых содержания — наполнитель. Двести хороших страниц при этом получают оценку не по своим заслугам, а по среднему уровню ресурса.

Второй механизм — доверие и лимиты. Робот тратит на сайт ограниченное время. Если оно уходит на обход пустых фильтров, страниц пагинации и тегов с одной записью, то важные страницы обходятся реже, обновления доходят медленнее, а новые материалы дольше попадают в индекс. Чистка возвращает этот ресурс туда, где он нужен.

Что именно делает балласт

• Съедает краулинговый бюджет. Робот заходит на сайт с лимитом. Каждая мусорная страница в этом лимите — минус одна нужная. На больших каталогах с фильтрами счёт идёт на десятки тысяч адресов, и до карточек товаров дело доходит в последнюю очередь.
• Создаёт конкуренцию между своими страницами. Когда пять материалов написаны про одно и то же разными словами, система не может выбрать, какой показывать. Итог — не показывается толком ни один. Это самая недооценённая причина стагнации у блогов и каталогов с перекрывающимися разделами.
• Понижает среднюю оценку ресурса. Массив страниц без спроса и без содержания — прямой сигнал о том, что сайт наполняли не для людей.
• Размывает внутренний вес. Ссылочный вес распределяется по всем страницам, на которые есть внутренние ссылки. Чем больше пустых адресов участвует в этом распределении, тем меньше достаётся тем, что должны продавать.
• Портит поведенческие показатели. Человек, попавший на пустую страницу из поиска, возвращается в выдачу. Такие возвраты учитываются и по конкретной странице, и по сайту.
• Оптовая торговля: как продавать вагонами через сайт на пять страниц

Как выглядит балласт

Тип страниц	Как распознать	Что с ними обычно делают
Технические дубли: сортировки, фильтры, метки сессий	Один и тот же контент по десяткам адресов с параметрами	Закрыть от индексации, указать канонический адрес
Теги и метки с одной-двумя записями	Страница-список, где нечего перечислять	Удалить, объединить в осмысленные разделы
Карточки товаров без описания и без спроса	Название, цена и ничего больше; ноль показов за год	Объединить в одну карточку с вариантами или убрать
Статьи-пересказы без единого перехода	Есть в индексе, показов нет, тема дублирует соседние	Свести несколько в один сильный материал
Страницы городов, сгенерированные подстановкой	Отличаются одним словом, содержание идентично	Оставить те, где есть реальное присутствие, остальные убрать
Пагинация без ограничений	Сотни адресов вида «страница 47» в индексе	Настроить канонические адреса и правила индексации
Служебные разделы: корзина, сравнение, личный кабинет	Попали в индекс по недосмотру	Закрыть от индексации

Отдельно стоит сказать про то, чего балласт не делает. Он не «просто лежит и никому не мешает» — эта мысль встречается чаще всего и мешает начать уборку. Аргумент звучит так: страница ничего не приносит, но и не отнимает, пусть висит. На деле она отнимает четырьмя перечисленными способами одновременно, и заметить это по отдельной странице невозможно — эффект виден только на массиве. Именно поэтому владельцы годами добавляют страницы и не понимают, почему трафик не растёт: каждая новая страница по отдельности выглядит безвредной.

Как найти балласт в своих данных

1. Сравните три числа. Сколько страниц физически есть на сайте, сколько загружено роботом и сколько реально в поиске. Разрыв между вторым и третьим — это и есть объём того, что система смотрела и отвергла.
2. Откройте раздел исключённых страниц в Вебмастере. Там указана причина: дубль, малополезная, недостаточно качественная. Сгруппируйте по причине и найдите закономерность — обычно виноват один шаблон или один модуль, а не сами страницы.
3. Выгрузите страницы с показами и кликами за год. Всё, что за двенадцать месяцев не получило ни одного показа, — кандидат на разбор. Именно на разбор, а не на удаление: причина отсутствия показов может быть технической.
4. Найдите каннибалов. Возьмите список запросов и посмотрите, какая страница показывается по каждому. Если по одной группе запросов система показывает то одну, то другую страницу — это конкуренция внутри сайта.
5. Посчитайте, что робот обходит. В статистике обхода видно, на какие разделы уходит лимит. Если половина обхода приходится на адреса с параметрами, вы нашли главный источник потерь.

Удалить, объединить или закрыть

Три разных инструмента, и путать их дорого.

Подробнее об этом — в статье «Как поднять сайт на первые позиции».

Ситуация	Решение	Почему так
Страница пустая, спроса на тему нет, ссылок на неё нет	Удалить, отдавать 410 или 404	Восстанавливать нечего, переадресовывать некуда
Несколько слабых страниц на близкие темы	Свести в одну сильную, остальные — переадресация на неё	Сохраняется накопленный вес, снимается конкуренция
Страница получала переходы, но устарела	Переработать, адрес не менять	Терять источник трафика ради чистоты структуры невыгодно
Технический дубль с параметрами	Закрыть от индексации и указать канонический адрес	Страница нужна пользователю, но не нужна в поиске
Товар снят с продажи, но его ищут по названию	Оставить страницу с пометкой и ссылками на замену	Спрос есть, и его можно перевести на актуальные позиции
Раздел нужен, но пуст в ожидании наполнения	Закрыть от индексации до наполнения	Пустой раздел в индексе работает против всего сайта

Порядок чистки без потерь

1. Сделайте полную выгрузку до начала. Список всех адресов с показами, кликами, входящими внутренними и внешними ссылками. Без этой таблицы любое удаление превращается в лотерею.
2. Начните с технических дублей. Это самый безопасный слой: страницы не приносили трафика, зато съедали обход. Эффект от их закрытия обычно виден быстрее всего.
3. Дальше объединяйте, а не удаляйте. Слабые материалы на смежные темы сводите в один, ставьте переадресацию со старых адресов на новый и переставляйте внутренние ссылки — иначе они будут вести в никуда.
4. Удаляйте партиями, а не разом. Несколько сотен адресов за подход, с паузой в две-три недели. Так вы увидите реакцию и успеете откатиться, если удалили лишнее.
5. Следите за 404 после каждой партии. В Вебмастере появятся ошибки обхода — это нормально для удалённых страниц. Ненормально, если среди них оказываются адреса, на которые ведут ссылки с других сайтов.
6. Обновите карту сайта. Удалённых адресов там быть не должно, иначе вы сами приглашаете робота на несуществующие страницы.
7. Оцените результат не раньше чем через полтора-два месяца. Переоценка ресурса занимает время, и первые недели после чистки трафик может проседать за счёт того, что удалённые страницы что-то приносили.

Чего удалять нельзя

• Страницы с внешними ссылками. Даже если сами по себе они бесполезны, на них указывают чужие сайты, и этот вес нужно переводить переадресацией, а не выбрасывать.
• Карточки товаров, которых нет в наличии, но которые ищут. Спрос по названию модели — это готовый покупатель. Его нужно встречать страницей с альтернативами, а не сообщением об ошибке.
• Материалы с небольшим, но стабильным трафиком. Двадцать переходов в месяц выглядят несерьёзно в общей таблице, но за год это уже заметная величина, а стоимость такой страницы равна нулю.
• Страницы, на которые ведёт много внутренних ссылок. Их удаление ломает структуру и оставляет за собой десятки битых ссылок по всему сайту.
• Всё, что вы не разобрали лично. Массовое удаление по формальному признаку вроде «ноль показов» регулярно уносит нужные страницы, у которых просто были технические проблемы с индексацией.
• Оптовая торговля: как продавать вагонами через сайт на пять страниц

Как это выглядит на разных типах сайтов

Интернет-магазин. Основной объём мусора здесь создаётся автоматически: комбинации фильтров, сортировки, страницы поиска по сайту, варианты одного товара по отдельным адресам. Содержательного балласта обычно меньше, чем кажется, — карточки редко бывают лишними сами по себе, они бывают пустыми. Поэтому порядок такой: сначала правила индексации для сгенерированных адресов, потом объединение вариантов одного товара в одну карточку, и только потом разбор карточек по спросу. Отдельная типовая находка — товары, которые давно не продаются, но их страницы продолжают висеть с ценой и кнопкой заказа.

Помогу с продвижением: продвижение сайтов белыми методами — вывожу сайты в топ Яндекса белыми методами.

Сайт услуг. Здесь мусор чаще всего рукотворный: страницы под каждый близкий запрос, которые отличаются одним словом в заголовке. «Ремонт квартир», «ремонт квартир недорого», «ремонт квартир цена» — три страницы вместо одной. Система видит три почти одинаковых документа и не показывает ни один. Лечится объединением: одна сильная страница, закрывающая тему полностью, вместо десяти вариаций. Вторая типовая проблема — региональные страницы, созданные подстановкой названия города.

Блог или информационный проект. Балласт здесь — материалы, написанные ради регулярности публикаций, и разросшаяся система меток. Отдельная беда: несколько статей на одну тему, написанных в разные годы. Начинать надо с поиска пересечений — не с удаления, а именно с поиска: обычно выясняется, что тридцать материалов покрывают десять тем, и после объединения остаётся десять сильных страниц вместо тридцати слабых. Метки и рубрики с одной-двумя записями закрываются или сливаются в осмысленные разделы.

Когда чистка не поможет

Удаление страниц — не универсальное лекарство, и есть случаи, где оно ничего не изменит.

Тему разбирал отдельно: «Мультирегиональность: как один сайт законно попадает в топ пятидесяти городов».

Первый: сайт небольшой и балласта на нём попросту нет. На тридцати страницах чистить нечего, проблема будет в другом — в содержании, в технической части или в том, что под нужные запросы страниц не создано вовсе.

Второй: причина падения — санкции или технический сбой. Пока не найдена настоящая причина, чистка выглядит как деятельность, но результата не даёт. Более того, массовое удаление в такой момент добавляет системе поводов для переоценки и затягивает восстановление.

Отдельный случай — когда чистка помогает, но не так, как ожидали. Бывает, что после удаления мусора позиции не двигаются, зато резко ускоряется индексация: новые страницы начинают попадать в поиск за сутки вместо трёх недель. Это тоже результат, и довольно ценный, просто он проявляется не в графике трафика, а в скорости, с которой работают все последующие изменения. На больших каталогах именно это и оказывается главным эффектом уборки.

Третий: балласт удалён, а структура осталась прежней. Если модуль, который генерировал мусорные адреса, продолжает работать, через несколько месяцев вы получите тот же объём заново. Чистка обязана заканчиваться настройкой правил, иначе это разовая уборка в комнате, куда продолжают заносить хлам.

Частые вопросы

Сколько страниц вообще нормально для сайта? Правильный ориентир не количество, а соотношение: сколько страниц получают показы из поиска. Если показы есть у восьми из десяти, объём здоровый, сколько бы их ни было. Если у двух из десяти — сайт раздут независимо от того, сто там страниц или сто тысяч.

Смежный материал по теме — «Домен не работает, а хостинг жив: как записи DNS роняют сайт».

Что отдавать при удалении: 404 или 410? Оба варианта рабочие. Код 410 сообщает, что страница удалена намеренно, и обычно приводит к чуть более быстрому исключению из индекса. Практическая разница невелика, гораздо важнее не оставлять удалённые адреса в карте сайта и во внутренних ссылках.

Можно ли просто закрыть всё лишнее от индексации вместо удаления? Можно, но это половинчатое решение. Закрытые страницы перестают участвовать в поиске, однако робот продолжает их видеть, а внутренние ссылки продолжают распылять вес. Если страница не нужна ни человеку, ни поиску, её лучше убрать.

Не просядет ли трафик после чистки? Первые недели — вероятно, за счёт того, что удалённые страницы что-то приносили. Дальше картина зависит от того, насколько точно вы отобрали балласт. Именно поэтому удалять надо партиями и с выгрузкой до начала: так провал видно сразу и его можно отыграть назад.

Как понять, что чистка сработала, если трафик зависит и от сезона? Смотрите не на общий график, а на три показателя по отдельности: скорость попадания новых страниц в индекс, долю страниц с показами от общего числа и распределение обхода по разделам. Все три реагируют на уборку раньше трафика и почти не зависят от сезонности. Если они улучшились, а трафик стоит — значит, эффект есть, но упирается в другой ограничитель.

Сработает ли это на интернет-магазине, где карточек десятки тысяч? Там это работает лучше всего, потому что основной источник мусора — автоматически сгенерированные адреса фильтров и сортировок. Начинать надо именно с них, а к карточкам переходить в последнюю очередь и только после разбора спроса по каждой.

Коротко

• Поиск оценивает сайт целиком, поэтому пустые страницы понижают и те, что сделаны хорошо.
• Главный вред балласта — потраченный краулинговый бюджет, конкуренция своих страниц между собой и размытый внутренний вес.
• Ноль показов за год — повод разобраться, а не автоматическая причина для удаления.
• Слабые материалы на смежные темы выгоднее объединять с переадресацией, чем удалять.
• Чистить надо партиями, с полной выгрузкой до начала и проверкой результата через полтора-два месяца.
• Если генератор мусорных адресов не отключён, объём вернётся — уборка обязана заканчиваться настройкой правил.
• Оптовая торговля: как продавать вагонами через сайт на пять страниц

Если непонятно, что на вашем сайте балласт, а что рабочие страницы, разобрать это можно на SEO-консультации: посмотрим выгрузку по показам, исключённые страницы и статистику обхода и составим список того, что убирать, объединять и закрывать.