Сбор и кластеризация семантического ядра

Семантическое ядро на сорок тысяч фраз может пролежать в таблице два года и не привести на сайт ни одного покупателя, потому что список слов сам по себе ничего не продаёт: продают страницы, созданные под понятные группы запросов. Разница между «мы собрали семантику» и «мы построили структуру» — это разница между красивым файлом и сайтом, который отвечает на вопросы людей ровно там, где они их задают. Ниже — рабочий порядок действий: от первых слов, названных владельцем бизнеса, до карты, где каждой группе запросов соответствует конкретный адрес страницы.

Ядро — это карта страниц, а не список слов

Главный результат работы с семантикой — не выгрузка, а ответ на вопрос: какие страницы вообще должны существовать на сайте. Каждый устойчивый кластер запросов означает, что есть группа людей с одинаковой задачей, и им нужна отдельная посадочная страница. Нет кластера — нет страницы. Есть кластер, а страницы нет — это дыра в структуре, через которую трафик уходит к конкурентам.

Такая постановка сразу меняет отношение к объёму. Ядро в тысячу запросов, разложенное по сорока страницам, полезнее ядра в сорок тысяч запросов, лежащего одной кучей. Я не раз видел проекты, где семантику собрали на совесть, а структура сайта осталась той же, что была до сбора: четыре раздела и главная. Работа была сделана, эффекта не было.

Поэтому в конце процесса у меня всегда появляется один и тот же документ — таблица соответствия, где в одной колонке группа запросов, в другой адрес страницы, в третьей её статус: существует, требует доработки, нужно создать. Всё остальное — промежуточные материалы.

С чего начинать: базовые запросы от бизнеса

Стартовый список никогда не берётся из программ. Он берётся из головы владельца и из речи менеджеров. Три вопроса дают костяк:

• Что мы продаём? Перечислить услуги и товарные группы так, как они реально существуют в прайсе, а не так, как названы в меню сайта.
• Как это называют клиенты? Часто отраслевое название и разговорное расходятся: «системы вентиляции» против «вытяжка в квартиру», «остекление светопрозрачными конструкциями» против «панорамные окна».
• Чем мы отличаемся? Срочность, выезд, гарантия, работа с юрлицами, определённый бренд, конкретный район — всё это превращается в уточнённые запросы, где конкуренция ниже, а конверсия выше.

Из этих ответов получается тридцать-пятьдесят базовых фраз — маркеров. Они и станут точками, из которых будет расти ядро. Ошибка на этом этапе тянется дальше: если в маркеры не попало направление, которое приносит бизнесу деньги, оно не появится и в структуре сайта.

Отдельно проверяю синонимический ряд. Для одной и той же услуги в русском языке обычно есть три-четыре равноправных названия, и спрос между ними распределён неравномерно. Иногда вариант, который в компании считают «неправильным», собирает вдесятеро больше обращений, чем официальный термин.

Источники расширения ядра

Дальше маркеры прогоняются по источникам. Ни один из них не даёт полной картины, но вместе они закрывают почти весь спрос.

Источник	Что даёт	Трудоёмкость
Статистика запросов (Вордстат)	Основная масса фраз с числами спроса, левая и правая колонки	Средняя, при ручном сборе высокая
Подсказки поисковой строки	Живые формулировки, свежий и разговорный спрос, который ещё не набрал статистику	Высокая вручную, низкая при сборе программой
Блок «вместе с этим ищут» внизу выдачи	Соседние темы и смежные интенты, идеи для новых разделов	Низкая
Структура конкурентов из топа	Проверенная схема разделов, подсказка о недостающих страницах	Средняя
Внутренний поиск по сайту	Реальные слова ваших посетителей и список того, чего они не нашли	Низкая, если поиск подключён к аналитике
Вопросы менеджерам и записи звонков	Формулировки из речи клиентов, возражения, темы для информационных страниц	Высокая, но окупается
Отчёт по поисковым запросам в панели вебмастера	Запросы, по которым сайт уже показывается: показы, клики, средняя позиция	Низкая
Программы сбора (Key Collector, Megaindex и аналоги)	Автоматизация обхода источников, снятие частот, чистка по спискам	Низкая после настройки

Порядок обхода имеет значение. Сначала статистика запросов — она задаёт объём. Потом подсказки — они дают формулировки, которых в статистике ещё нет. Потом свои данные — они показывают, где сайт уже цепляет спрос. Конкуренты идут последними: их структура полезна как проверка, а не как образец для копирования.

Статистика запросов и подсказки поиска

Левая колонка статистики даёт всё, что содержит вашу фразу целиком. Правая — то, что искали те же люди, и это самый быстрый способ найти соседние направления. Если по маркеру «ремонт стиральных машин» в правой колонке стабильно всплывает конкретный бренд, значит спрос сегментирован по маркам и под них нужны отдельные страницы.

Подсказки поисковой строки работают иначе. Они показывают то, что люди набирают прямо сейчас, включая сезонные и новые формулировки, по которым статистика ещё не накопилась. Сбор идёт перебором: маркер плюс каждая буква алфавита, маркер плюс предлоги, маркер плюс цифры. Вручную это утомительно, программы делают за минуты.

Отдельно собираю вопросительные формы: «как», «сколько стоит», «что лучше», «чем отличается», «нужно ли». Это будущие информационные страницы и блоки на коммерческих — именно они закрывают сомнения человека до обращения.

Свои данные: внутренний поиск, менеджеры и панель вебмастера

Самый недооценённый источник — собственная статистика. Внутренний поиск по сайту показывает, что человек не нашёл в меню. Если посетители раз за разом ищут услугу, которой нет в структуре, это готовая заявка на новую страницу, подтверждённая поведением, а не догадкой.

Отчёт по поисковым запросам в панели вебмастера даёт то, чего нет ни в одной программе: список фраз, по которым сайт уже показывается. Там обычно обнаруживаются два типа находок. Первый — запросы с показами и нулевыми кликами: страница попадает в выдачу, но заголовок и описание не заставляют кликнуть. Второй — запросы, которых вы не планировали: люди пришли с формулировкой, о которой никто в компании не думал.

Если нужны детали, смотрите «Подбор семантического ядра для сайта онлайн».

Менеджеры и записи звонков дают язык. Люди в разговоре произносят не «услуги по техническому обслуживанию», а «чтобы приехали и починили». Эти обороты почти всегда есть и в поиске, просто их не находят, потому что не подставляют в маркеры. Полчаса разговора с отделом продаж обычно приносит десяток фраз, которые не даёт ни один парсер.

Структура конкурентов как подсказка

Смотреть на конкурентов полезно не ради копирования, а ради проверки полноты. Если в топе по вашей тематике у четырёх сайтов из пяти есть отдельный раздел, которого у вас нет, это сильный сигнал: спрос там есть, и поиск считает такую страницу уместной.

Порядок простой: берём три-пять сайтов, которые устойчиво держатся в выдаче по маркерам, выписываем их разделы и подразделы в столбик, сравниваем со своим меню. Дальше каждое расхождение проверяем по спросу — иногда раздел существует у всех по инерции и реальных запросов под ним нет.

Помогу с продвижением: SEO-продвижение под ключ — вывожу сайты в топ Яндекса белыми методами.

Копировать структуру целиком опасно ещё и потому, что у конкурента может быть другой ассортимент или другая модель продаж. Страница, которая у него работает как каталог, у вас окажется пустой карточкой без содержания.

Частотность и её виды

Число рядом с запросом обманывает чаще, чем помогает. Общая частота считает все фразы, содержащие ваши слова в любом порядке и с любыми добавками. Запрос «купить диван» с общей частотой в сотни тысяч на деле складывается из тысяч разных формулировок, а сам по себе набирается редко.

Вид частотности	Что считает	Зачем нужна
Общая (базовая)	Все запросы, включающие эти слова в любых формах и сочетаниях	Оценка объёма тематики целиком, грубая прикидка направления
Уточнённая (в кавычках)	Только фразы из этих слов, но в любых словоформах и порядке	Понять реальный вес формулировки внутри тематики
Точная (кавычки и восклицательные знаки)	Ровно эта фраза в этой форме	Отсев пустышек и планирование конкретной посадочной страницы
Сезонная динамика по месяцам	Распределение спроса внутри года	Планирование сроков работ и контента заранее, а не в пик
Частота с привязкой к региону	Спрос в конкретном городе или области	Оценка окупаемости для локального бизнеса

Практическое правило: решения принимаю по уточнённой и точной частоте, общую использую только чтобы понять масштаб тематики. Если у фразы общая частота четыре тысячи, а точная — ноль, страницы под неё не будет, зато будет страница под ту формулировку, которая внутри этих четырёх тысяч действительно набирается.

Ещё одна ловушка — накрутка. У части запросов частота раздута автоматическими проверками позиций. Признак: высокая частота при полном отсутствии кликов на всех сайтах в выдаче и странной, неестественной формулировке. Такие фразы стоит проверять по данным своей панели вебмастера, прежде чем строить вокруг них работу.

Чистка ядра: что выбрасываем

Сырая выгрузка на две трети состоит из мусора. Чистка идёт списками минус-слов, и удобнее вести их по категориям, чтобы список можно было переиспользовать на следующих проектах.

• Бесплатное и самодельное: «бесплатно», «своими руками», «самостоятельно», «скачать», «бу», «даром» — если вы продаёте услугу или новый товар.
• Чужие бренды и названия конкурентов, если вы не работаете с их продукцией и не планируете сравнительных материалов.
• Другие регионы и города, где вы не оказываете услуг, вместе с районами и станциями метро чужих городов.
• Нерелевантные значения многозначных слов: «замок» как строение и как механизм, «кран» подъёмный и водопроводный, «мышь» живая и компьютерная.
• Работа и обучение: «вакансии», «зарплата», «курсы», «обучение», «отзывы сотрудников» — сюда приходят не покупатели.
• Профессиональная и учебная лексика: ГОСТы, чертежи, рефераты, диплом, лабораторная — если вы не продаёте документацию.

Отдельная линия чистки — разделение информационного и коммерческого. Это не выбрасывание, а сортировка: «сколько стоит натяжной потолок» пойдёт на коммерческую страницу с ценами, «как ухаживать за натяжным потолком» — в блог. Смешивать их на одной странице почти всегда значит не попасть ни в один тип выдачи.

Чистку делаю в два прохода. Первый — автоматический, по спискам стоп-слов. Второй — глазами, по алфавитному срезу: сортирую фразы и просматриваю блоками. На второй проход уходит время, но именно он ловит то, чего не увидит ни один фильтр.

Интент — главный критерий группировки

Перед тем как что-то группировать, у каждой фразы нужно понять задачу человека. Один и тот же товар в разных формулировках означает разные стадии решения, и страницы под них нужны разные.

• Узнать: человек разбирается в теме, сравнивать и покупать пока не готов. Формулировки со словами «что такое», «как работает», «зачем нужен».
• Сравнить: выбор между вариантами. «Что лучше», «чем отличается», «плюсы и минусы», «рейтинг».
• Выбрать исполнителя или продавца: «компания», «фирма», «мастер», «под ключ», плюс название города.
• Купить или заказать прямо сейчас: «купить», «цена», «заказать», «стоимость», «доставка», конкретная модель или артикул.

Проверять интент по словам-маркерам — только первый шаг. Настоящая проверка — посмотреть выдачу. Если по запросу в топе десять статей, коммерческая страница туда не попадёт, сколько бы кнопок «заказать» вы на неё ни поставили. И наоборот: если в топе каталоги, статьёй там делать нечего.

Подробнее об этом — в статье «Оптимизация семантического ядра».

Кластеризация по общей выдаче и ручной контроль

Основной метод группировки — по пересечению результатов поиска. Логика такая: если по двум запросам поиск показывает во многом одни и те же сайты, значит он считает эти запросы одной задачей, и их можно продвигать одной страницей. Если выдачи расходятся, страницы нужны разные, даже когда фразы кажутся близкими.

Порог пересечения задаётся числом общих адресов в топе. Мягкий порог даёт крупные группы и мало страниц, жёсткий — много мелких групп и раздутую структуру. Для коммерческих проектов я обычно начинаю с жёсткого порога, а потом склеиваю мелкие группы вручную там, где это очевидно.

Автоматическая группировка требует контроля по нескольким причинам. Выдача меняется, и кластеризация, снятая полгода назад, уже неточна. Малочастотные запросы дают нестабильный топ, и алгоритм разбрасывает их случайным образом. По части запросов выдача забита агрегаторами и маркетплейсами, из-за чего разные по смыслу фразы попадают в одну группу просто потому, что везде одни и те же крупные площадки.

Поэтому после машинной группировки я обязательно прохожу руками: читаю названия групп, ищу фразы, которые смыслово выпадают, объединяю дубли, разбиваю кластеры, где смешались разные интенты. На проекте в пять тысяч запросов это день работы, и он окупается — иначе структура получится собранной по формальному признаку, а не по смыслу.

От кластеров к страницам: карта соответствия

Когда группы готовы, каждая получает адрес. Это и есть итоговый документ проекта.

Кластер	Тип страницы	Адрес	Статус
Услуга целиком, общие формулировки	Раздел услуги	/uslugi/nazvanie/	Есть, дополнить блоками цен и этапов
Услуга плюс уточнение по типу объекта	Подстраница услуги	/uslugi/nazvanie/tip-obekta/	Создать
Услуга плюс город или район	Региональная страница или поддомен	/uslugi/nazvanie/gorod/	Создать после проверки спроса
Цена, стоимость, прайс	Блок цен внутри страницы услуги	/uslugi/nazvanie/#ceny	Есть, вынести таблицу выше
Сравнение вариантов	Информационная статья	/blog/sravnenie-variantov/	Создать
Как это работает, что входит	Информационная статья со ссылкой на услугу	/blog/kak-rabotaet/	Есть, переписать под интент

В карту полезно добавить ещё три колонки: суммарную частоту кластера, главный запрос группы и черновой заголовок. Тогда документ сразу становится техническим заданием: видно, что писать, под что и в каком приоритете. Приоритет расставляю по сочетанию спроса и близости к деньгам — сначала коммерческие кластеры со средней частотой, потом информационные.

Каннибализация: когда две страницы борются друг с другом

Каннибализация возникает, когда один кластер закреплён за двумя адресами. Поиск не может выбрать, какую страницу показывать, и показывает то одну, то другую, а обе держатся хуже, чем держалась бы одна.

Если нужна помощь по теме — мой курс по SEO.

Признаки видны в панели вебмастера: по одному запросу в отчёте чередуются разные адреса, позиция скачет, суммарные клики не растут при росте показов. Проверить можно и вручную — поиском по сайту с указанием запроса: если находится несколько страниц, отвечающих на одно и то же, это она.

Правило простое: один кластер — один адрес. Если страниц две, решение одно из трёх. Объединить содержимое в более сильную страницу, а слабую закрыть перенаправлением. Развести страницы по разным интентам, переписав каждую под свою задачу. Или оставить обе, но подчинить одну другой: общая страница-раздел и узкая подстраница с явной перелинковкой.

Под кластер нет страницы: создавать или расширять

Самая частая ситуация после кластеризации — группа запросов есть, а страницы под неё нет. Решение зависит от того, насколько кластер самостоятелен.

Тему разбирал отдельно: «Кластеризация запросов».

• Кластер крупный, с собственным набором формулировок и своей выдачей — создаём отдельную страницу. Её задача не пересекаться с соседями ни заголовком, ни содержанием.
• Кластер маленький, а выдача по нему сильно пересекается с уже существующей страницей — расширяем существующую: добавляем раздел, блок вопросов, таблицу, абзац с нужной формулировкой в заголовке второго уровня.
• Кластер спорный, спрос низкий, ресурс ограничен — откладываем и возвращаемся при следующем обновлении ядра. Пустые страницы, созданные «на всякий случай», вредят больше, чем их отсутствие.

Отдельно предупреждаю о соблазне наплодить страниц под каждую мелкую фразу. Десять почти одинаковых текстов, отличающихся одним словом, поиск воспринимает как малополезные и не показывает ни один. Дробить структуру имеет смысл там, где у людей действительно разные задачи, а не там, где отличается словоформа.

Региональность и как она меняет ядро

Для локального бизнеса география меняет всё. Один и тот же запрос в разных городах имеет разный спрос, разную конкуренцию и разную выдачу, а значит и кластеризация в каждом регионе получается своя.

Практических следствий три. Первое: частоты нужно снимать с привязкой к целевому региону, иначе цифры по стране создадут ложную картину масштаба. Второе: кластеризацию тоже надо делать по региональной выдаче — группы, склеенные по московскому топу, могут не совпасть с реальностью в другом городе. Третье: запросы с названием города и без него часто попадают в один кластер, если регион сайта задан правильно, и тогда отдельная страница «услуга в городе» не нужна.

Когда городов несколько, работает схема с отдельными страницами или поддоменами под каждый, но только при одном условии — на них есть что показать: адрес, телефон, местные работы, цены. Копия одного текста с подменённым названием города даёт нулевой результат и легко попадает под фильтры.

Как поддерживать ядро живым

Собранное один раз ядро устаревает. Появляются новые товары и услуги, меняются формулировки, часть спроса перетекает в другие слова, конкуренты открывают разделы, которых раньше не было.

Периодичность	Что делаем	Откуда берём данные
Ежемесячно	Снимаем новые запросы, по которым сайт начал показываться	Отчёт по поисковым запросам в панели вебмастера
Ежеквартально	Пересобираем частоты по ключевым кластерам, проверяем каннибализацию, обновляем карту страниц	Статистика запросов, панель вебмастера, аналитика
Перед сезоном	Готовим страницы и материалы под сезонные кластеры за два-три месяца до пика	Динамика частот по месяцам
При запуске товара или услуги	Собираем отдельный мини-кластер и заводим под него страницу до начала рекламы	Маркеры от бизнеса плюс подсказки
Раз в год	Полная ревизия структуры: что не даёт трафика, что объединить, что удалить	Аналитика посещаемости и обращений

Сезонность заслуживает отдельного внимания. Если спрос на услугу растёт в апреле, страницу надо создавать в январе-феврале: поиску нужно время, чтобы её найти, оценить и подтянуть в выдачу. Материал, выпущенный в пик, обычно опаздывает на целый сезон.

Типичные ошибки и их последствия

Ошибка	Что происходит	Как правильно
Гнаться за самыми высокочастотными запросами	Бюджет уходит в конкуренцию с агрегаторами, позиций нет годами	Начинать со средних и уточнённых кластеров, где конверсия выше
Лепить все запросы на главную страницу	Главная не отвечает ни на один запрос точно, внутренние страницы пустуют	Разносить кластеры по посадочным, главной оставить общий интент
Брать запросы по общей частоте без проверки	Страницы созданы под формулировки, которые никто не набирает	Проверять уточнённую и точную частоту до принятия решения
Игнорировать интент	Коммерческая страница по информационному запросу не попадает в выдачу	Смотреть тип выдачи по главному запросу кластера
Не чистить чужие бренды и регионы	Часть трафика нецелевая, заявок нет, показатели поведения падают	Вести и переиспользовать списки минус-слов
Доверять автоматической кластеризации без проверки	В одной группе оказываются разные задачи, страница получается размытой	Ручной проход по группам после машинной сборки
Плодить страницы под словоформы	Малополезные дубли, каннибализация, потеря доверия к разделу	Одна страница на одну задачу пользователя
Собрать ядро один раз и забыть	Структура отстаёт от спроса, новые направления не охвачены	Квартальное обновление и мониторинг новых запросов

Последняя строка в этой таблице по опыту самая дорогая. Ядро, собранное и заброшенное, через год описывает бизнес, которого уже нет: ассортимент поменялся, услуги добавились, а карта страниц осталась прежней.

Частые вопросы

Сколько запросов должно быть в ядре?
Правильного числа не существует, важна полнота охвата задач, а не объём файла. Для небольшой услуговой компании нормально от трёхсот до полутора тысяч очищенных фраз, для магазина с широким каталогом — десятки тысяч. Если из ядра получается понятная структура и под каждую группу ясно, что за страница, объём достаточен.

Можно ли обойтись без программ и собрать всё вручную?
Для узкой темы с двумя-тремя услугами — да, статистики запросов и подсказок хватит. Как только маркеров становится больше двадцати, ручной сбор начинает съедать дни и терять фразы. Программы вроде Key Collector экономят время на обходе источников и снятии частот, но решения о группировке всё равно принимает человек.

Как понять, что кластер стоит отдельной страницы?
Смотрю на три вещи: суммарный спрос группы, самостоятельность выдачи по её главному запросу и наличие содержания, которое можно показать. Если по запросу в топе стоят специализированные страницы, а не общие разделы, страница нужна. Если спроса почти нет и написать особо нечего, кластер лучше присоединить к соседнему.

Что делать с запросами, по которым в топе только маркетплейсы?
Биться за них лобовым способом дорого и чаще всего бессмысленно. Работать стоит по уточнённым формулировкам: конкретная модель, характеристика, назначение, город, срочность. Там конкуренция ниже, а посетитель ближе к покупке. Широкие запросы начнут подтягиваться позже, когда раздел наберёт вес по узким.

Как часто пересобирать ядро полностью?
Полная пересборка нужна раз в год или при серьёзном изменении ассортимента. В промежутке достаточно квартального обновления: снять новые фразы из панели вебмастера, пересчитать частоты по ключевым кластерам, проверить, не появилась ли каннибализация после новых публикаций.

Почему сайт с подобранными запросами всё равно без трафика:

5:49

Коротко

• Цель сбора семантики — не список слов, а карта страниц: каждому устойчивому кластеру должен соответствовать один адрес.
• Стартовые маркеры берём у бизнеса и менеджеров, расширяем статистикой, подсказками, своими данными и структурой конкурентов.
• Решения принимаем по уточнённой и точной частоте, общая нужна только для оценки масштаба тематики.
• Интент важнее словарного сходства: тип выдачи по главному запросу кластера определяет, какой будет страница.
• Автоматическую кластеризацию всегда проверяем руками, а готовое ядро обновляем раз в квартал, иначе структура отстаёт от спроса.

Собрать спрос под ваш бизнес и разложить его по страницам помогу на SEO-консультации.