Семантическое ядро: Кластеризация ключевых слов

Методов по поиску ключей на самом деле много.

Вы можете воспользоваться следующими механизмами:

1. Собрать ключевые слова при помощи SERPSTAT – сняв позиции, поисковые подсказки и слова, по которым тоже ранжируется сайт. Выкачать все удобными списками в Excel и объединить воедино.
2. Провести аналогичные действия в AHREFS – собрав ключевые слова, подсказки, релевантные слова и спарсив все ключи у конкурентов.
3. Собрать ключевые слова в выдаче при помощи нашей утилиты. В прошлой статье мы сделали обзор, как можно найти ключевые слова.
4. Воспользоваться планировщиком ключевых слов и скачать подсказки от AdWords.
5. Воспользоваться сторонними сервисами по ключевым словам – keywordtool.io или ubersuggest.com.
6. Запустить KeyCollector и спарсить поисковые подсказки из WORDSTAT Яндекса, Google.

Способов много, но все они сходятся к одной проблеме.

Как распределить ключевые слова по страницам?

Ведь просто сваленные в кучу слова все же объединяются в единые группы, по которым можно создать ограниченное количество страниц.

Из личного опыта могу сказать, что ни на одних SEO-курсах и платных семинарах не проходят детально эту тему.

И вообще не останавливаются на проблематике кластеризации.

Даже опытные сеошники, которые не один год потратили в SEO делают эту работу не правильно.

В последствие продвигаются не релевантные страницы, которые не дают результаты.

Полгода уходят впустую и только потом ищут причины.

Сегодня мы расскажем Вам все этапы кластеризации, чтобы Вы не потеряли эти полгода на продвижение сайта.

О кластеризации

В этом блоке мы рассмотрим саму процедуру кластеризации, а также коснемся важных методов:

• метод по выдаче;
• ручной метод.

И оценим их преимущества и недостатки.

В интернете Вы найдете много обзоров, как относятся к кластеризации семантического ядра те или иные SEO-блогеры.

Например, Сергей Салтыков справедливо считает, что для подбора ключевых слов нужно учитывать много факторов, таких как трудность ключей и их конкуренция.

При этом отмечает, что семантическое ядро для контент-менеджера и итоговое СЯ для сайта будут отличаться, а для контекста вообще нет смысла кластеризовать семантическое ядро.

Не соглашусь, так как для контекста умение группировать запросы по смыслу имеет наибольшее значение.

Вы должны учесть как отдельные фразы, так и точные вхождения тех или иных запросов за счет правильно кластеризованной семантики.

СПОСОБ ПЕРВЫЙ. ПО ВЫДАЧЕ

Вы знаете, что самый простой способ сделать кластеризацию – довериться поисковой системе и просто оценить выдачу.

Этот метод основан на простом и незамысловатом процессе:

1. Берем список ключевых слов.
2. Закидываем одно из них в поисковую систему.
3. Смотрим, что получилось в ТОП-10.
4. Записываем выдачу по каждому ключу.
5. Затем сравниваем процент совпадений.

Когда страницы совпадают между собой, это значит, что выбранные ключи родственные друг другу.

Такой тип группировки называется SERP-кластеризацией или кластеризацией по выдаче.

Ее активно пиарят многие SEO-блогеры, специалисты и интернет-издания, но при этом мало кто ею пользуется.

Например, услуга по кластеризации отсутствует в AHREFS (удивительно, почему) и не очень хорошо работает в SERPSTAT.

Почему не очень хорошо?

Потому что допускает иногда очень грубые ошибки, запихивая в кластер не совсем однородные слова, а также формирует очень много двусловных кластеров – без адекватной структуры.

Готовую семантику затем достаточно сложно “обрабатывать” копирайтеру.

Надеемся, что кластеризатор SERPSTAT станет лучше.

Подобная услуга есть только у web-сервисов, которые не очень распространены в мире.

В чем же подвох?

Вы не поверите, но он есть.

И он очевиден.

При помощи этого метода семантика, собранная два месяца назад и кластеризованная в то же время, может отличаться кардинально от тех же ключей, но кластеризованных сегодня.

Представьте себе такого SEО-специалиста, который каждые три месяца ключи в семантике перераспределяет туда-сюда, никак это не мотивируя.

Да, именно этот очевидный недостаток влияет на кластеризацию при помощи ряда платных сервисов.

Мы раньше часто пользовались Topvisor, Rush analytics и пришли к печальному выводу, что у таких сервисов есть три недостатка:

• готовая кластеризация может отличаться спустя время из-за смены сайтов в выдаче;
• их готовые семантические ядра нужно постоянно дорабатывать;
• они  дорогие.

Конечно, если Вы собираете семантику для собственного ресурса, Вам понравится такой помощник.

Но когда Вы регулярно ее обновляете и дорабатываете, а также ведете много других проектов, все недостатки будут видны налицо.

Ну и отдавать 5$ за то, чтобы кластеризовать 1000 слов, только поначалу кажется недорого.

Например, я для нового сайта собирал ключи (где нужно было продумать существующие страницы и прописать новые).

Для кластеризации и чистки я перебрал 80 000 запросов, собранных из разных источников.

Каким способом я их кластеризовал, расскажу в этой статье ниже.

Но если бы я купил кластеризацию у вышеперечисленных ребят, то разорился бы на 400$ на ровном месте.

Еще немаловажная причина того, почему не стоит платить сторонним сервисам за кластеризацию – это непонятность алгоритмов.

Например, в одном из сервисов есть такие виды кластеризации, как Soft, Moderate и Hard.

Понятно, что для разных объемов семантики рекомендуется использовать все методы, но какой именно выбрать вам – ни одна система не подскажет.

Более того, отсутствие возможностей “настройки” до мелочей делает сервисы достаточно неполноценными: например, когда очевидные синонимы все равно попадают в разные кластеры.

Еще в Вашу семантику может затесаться пул “не Ваших” запросов, которые надо бы почистить.

Но Вы забыли это сделать и закинули все в платный сервис.

ШИК – теперь и за семантику заплатили, и еще руками чистить…

СПОСОБ ВТОРОЙ. ВРУЧНУЮ

Окей, Вы решили не платить жадным сервисам, у Вас нет ничего, кроме Excel, Вашей усидчивости и времени.

Вы можете сделать все вручную.

Спросите как?

Просто!

Берем банальное приложение по картам ума (mind-mapping) и начинаем умственно чертить, чем будет заниматься наш сайт.

Для этого берем и выписываем все услуги и товары, которые мы планируем продавать.

Составляем полноценный список.

Начнем со структуры. Мы выделим те страницы, которые надо будет создать обязательно.

Главная страница – должна отвечать основному виду деятельности Вашей компании.

И основной запрос – это вид деятельности Вашего бизнеса.

SEO-студия, интернет-магазин одежды или парикмахерская в Москве – здесь и прописываем наши основные ключи.

Страницы ПРОДУКЦИИ (товаров или услуг) – в этом блоке будут товары и услуги компании, объединенные в различные категории.

На эти группы страниц будет приходиться 99% Вашей продвигаемой семантики.

Из них выделяются такие типы:

Страницы категорий верхнего уровня

Здесь находятся крупные группы товаров и услуг, которые являются фундаментально отличающимися друг от друга.

Так, например если Вы интернет-магазин техники, то Вы не будете смешивать в один блок фото и видеоаппаратуру со смартфонами и планшетами.

Правда в единый блок сможете объединить фото и видеоаппаратуру.

Данный список собирается исключительно во время мозгового штурма и после анализа конкурентов.

Страницы подкатегорий или посадочные страницы

По факту это могут быть уже внутренние подстраницы и подкатегории.

И тут результаты кластеризации должны показать себя с разных сторон.

Каждая страница должна вмещать в себя трафиковые ключи, объединенные одной логикой.

Товарные страницы или страницы услуг

На эти страницы обычно семантика подбирается реже.

Исключение – когда оптимизируются названия услуг под более высокочастотные ключевые слова.

Страницы блога

Все информационные запросы, ключи-вопросы не стоит выбрасывать.

Также все околоцелевые запросы соберите в единый пул и рассортируйте по смысловым рубрикам.

Это будут категории нашего блога.

Затем их надо будет кластеризовать.

На что следует обратить внимание при сборе ключевых слов вручную?

Совет 1. Важно использовать базы ключевых слов, собранные при помощи хороших сервисов.

Если Вы генерируете ключевые слова самостоятельно, не забывайте проверять частотность фраз как в широком, так и во фразовом соответствии.

Мы рекомендуем парсить ключевые слова при помощи следующих сервисов:

• Яндекс Wordstat;
• SERPSTAT;
• Ahrefs;
• Semrush;
• Планировщик ключевых слов.

Совет 2.  Рекомендуем изучать структуру конкурентов на поиск синонимов.

Искать синонимы можно при помощи простых методов:

1. SERPSTAT и Ahrefs имеют свой механизм поиска релевантных ключей.
2. Поисковая выдача. Введите основной ключ и изучите сниппеты или страницы. Там можно найти сразу несколько вариантов ключевых слов.
3. Яндекс Wordstat – отличный способ по поиску синонимов.

Вы можете воспользоваться скриптом для автоматизации (согласно мануалу Сергея Кокшарова).

Недостаток ручного метода – он отнимает огромное количество времени!

На сбор семантики пусть даже в том же Key Collector вручную может уйти от 10 до 50 часов даже для посредственного сайта!

Ведь Вам придется по факту перегруппировывать ключевые слова по смыслу, разносить их по группам.

Причем делать часто повторяющиеся действия “на глаз”, не используя эмпирический машинный подход нигде, кроме как в задаче принципов фильтрации!

Вы хотите получать бесплатный трафик?

Вас интересует продвижение своего сайта?

Заполните форму ниже и я лично свяжусь с Вами и мы обсудим план по раскрутке вашего бизнеса!

Инструкция по кластеризации

В этом блоке мы будем уже конкретно и пошагово расписывать инструкцию:

• как подобрать ключевые слова;
• как присвоить им правильные группы;
• как их распределить по посадочным страницам.

И все сопроводим скринами и гайдами.

Итак, Вы все же приступили к процессу кластеризации ключевых слов.

Скачали все файлы с ключевиками.

Примерно прикинули структуру сайта (оценили, чем будете заниматься).

И у Вас стоит задача разбить их по группам максимально релевантно.

Мы создали удобный инструмент по быстрой кластеризации ключевых слов, который умеет быстро и оперативно распределять ключевые слова по группам.

Просто импортируйте ключевые слова в колонку списка слов.

Краткий гайд по полям, которые есть в нашем кластеризаторе.

Считать как одно слово

Часто в семантике могут встречаться неразрывные словосочетания.

Например, iPhone 7, iPhone 6S, iPhone 6 – по факту это разные словосочетания, и если их не сцепить, в кластеризации в одну группу могут попадать все варианты.

А этого быть не должно.

Аналогично Вы можете вспомнить любые названия марок автомобилей, которые могут быть записаны через пробел (например A4 и A 4).

Для удобства пропишите все значения через запятую.

Минус-слова

Часто в скачанной семантике Вы можете найти огромное количество слов, которые хотелось бы до кластеризации удалить, но у Вас на это нет времени и сил.

Такое бывает, когда Вы скачаете выгрузки из SERPSTAT или AHREFS или соберете ключевые слова через тот же WORDSTAT Яндекса.

В итоге в выдаче могут появиться слова, которые явно Вам не нужны и годятся для других видов бизнеса.

Их наличие может сильно подпортить результат кластеризации.

Мы встроили простой механизм, который явно оценят сборщики семантики для контекстной рекламы – а именно механизм удаления минус-слов из скачанных списков.

Просто вставьте минус-слова через запятую в окошко.

Кстати, мы внедрили функционал поддержки точной словоформы – просто пропишите слово с восклицательным знаком (вот !Так) – и система будет удалять слова только в данной словоформе.

Это полезно, если Вам нужно, например, удалить слово !бесплатно, но оставить бесплатная (например доставка).

Список игнорируемых слов

Бывает, что в кластеризации предлоги и местоимения, а также отдельные слова встречаются очень часто, но Вам не нужно под них создавать отдельную страницу в кластеризации.

Например, эти две группы по факту – одинаковые и слово WEB не должно вообще никак фигурировать в нашей кластеризации.

Такие слова нужно просто игнорировать и не обращать на них внимание.

Для этого мы в нашем кластеризаторе добавили соответствующее поле – Список игнорируемых слов.

Слова будут проигнорированы и не учтены в алгоритме кластеризации.

В систему по умолчанию уже вшиты предлоги на русском и английском языках.

Список обязательных слов

Яркий пример, когда Вы можете утонуть в количестве слов – это когда спарсите позиции конкурентов, ассортимент которых гораздо шире Вашего.

И окажется, что среди кластера может быть огромное количество слов, не связанных с Вашей тематикой.

В нашем примере нам нужно все, что касается SEO-продвижения, и только.

Поэтому возьмем только слова, связанные с этой тематикой и оставим их, а остальное проигнорируем.

В нашем кластеризаторе мы реализовали такой функционал – просто заполните колонку “Списка обязательных слов”.

Поддерживается ввод через запятую как слов, так и фраз.

Синонимы

Наиболее частая ошибка в кластеризаторах – неумение понимать и группировать синонимы.

Key Collector при группировке по словам не понимает синонимы априори, и Вы вынуждены потом руками склеивать разделенные кластеры.

SERPSTAT в кластеризации плодит много однословных кластеров, которые наоборот стоит склеить воедино.

Но часто системы не знают, что нужно сцепить в один кластер, а что должно быть в разных.

Некоторые принципы кластеризации вполне уникальны и требуют особенного подхода, поэтому мы добавили функционал синонимов.

Просто пропишите в одну строку все синонимы, разделив их запятыми.

Для добавления нового синонима нажмите кнопку “+” и добавьте новые группы синонимов.

Вы можете добавить все синонимы сразу в проект или делать это уже по мере работы с сайтом.

Учет геозависимости

Часто бывает, что нужно разделить обширную семантику по городам.

Иногда Вы можете собрать огромный пул так называемых “всероссийских” или “всеукраинских” ключей – где есть все ключевые слова + какой-то город.

И при корявой кластеризации в одну группу могут попасть сразу два или три разных города.

С точки зрения корректности семантического ядра и для настройки контекстной семантики – это не рекомендуется: по факту тот, кто ищет пиццерию в москве и пиццерию в зеленограде – это разные клиенты, и условия доставки могут разительно отличаться.

Для этого в функционале нашего кластеризатора поддерживается огромная база населенных пунктов стран СНГ и Европы.

Также мы ввели опциональный алгоритм, который не позволяет одинаковым населенным пунктам попадать в одну группу.

По умолчанию эта функция включена.

Расширенная кластеризация по коротким запросам

Часто бывает, что узкая кластеризация игнорирует вполне короткие и высокочастотные запросы – они обычно остаются за бортом и не участвуют в готовом семантическом ядре.

Их приходится уже перебирать руками и оставлять вручную.

Мы создали простую опцию, которая проверяет несортированные более короткие фразы на максимальное соответствие частотной группе и добавляет фразу в нее.

Данный функционал мы добавили недавно и он предназначен не для всех (скорее всего – для настройщиков контекстной рекламы и опытных SEO-специалистов).

По умолчанию он отключен.

Включить его легко: просто установите галочку на это поле:

Сила кластеризации

Как и в любом кластеризаторе, у нас есть разные уровни группировки ключевых слов.

Принцип разделения основан на поиске совпадения разного количества ключей в одной группе.

Система находит слова и формирует их по принципу совпадений в кластерах:

В данном примере группировка проводится по двум словам.

Всего в кластеризаторе существует 4 вида кластеризации:

1. ВЧ – кластеризация по высокочастотным группам или так называемая мягкая кластеризация (Soft). Например, для сбора семантического ядра пригодится первичный уровень кластеризации. Данный метод ищет совпадения по двум словам в одном кластере.
2. СЧ – кластеризация по среднечастотным группам или средняя кластеризация (Moderate). Формируются более узкие группы, которые пригодятся для составления ТЗ копирайтеру на внешние статьи, которые Вы будете публиковать на внешних площадках или в блог. Формирует кластеры по трем словам в группе.
3. НЧ – кластеризация по низкочастотным группам или жесткая кластеризация (Hard). Пригодится для сбора узких групп. Применима для очень объемных СЯ и отбора информационных ключей. Формирует кластеры по 4 словам в одной группе.
4. МЧ – разбивка семантики по многословным запросам или по микрочастотным группам. Применимо для информационных сайтов с огромной высокочастотной семантикой. Разбивает слова по 5 совпадениям в группе.

Группировка и фильтры

Иногда трудно во всех результатах кластеризации путешествовать и искать нужные строки.

Приходится постоянно вылавливать нужные кластеры.

Мы добавили функционал, аналогичный фильтрам в Excel и в Google Таблицах.

Просто нажмите на слово ГРУППА и в диалоговом окне очистите лишние группы и отметьте нужные.

Система быстро отфильтрует результат.

Затем отметьте нужные группы и нажмите Сохранить выделенное – система сохранит результаты кластеризации в виде отдельных файлов.

Пригодится для тех, кто перебирает огромные пулы ключей для контекстной рекламы и ищет отдельные группы ключевых слов.

Также будет полезно для SEO-специалиста для составления ТЗ копирайтеру сразу по нескольким страницам.

Импортирование, сохранение проекта

Так как наш функционал достаточно непростой и много возможностей можно настроить для каждого проекта отдельно, мы сохранили простую схему по работе с проектным файлом.

Вы можете сохранить проект кластеризации, просто нажав на кнопку СОХРАНИТЬ.

В готовом Excel файле можно сразу добавить ключевые слова, частоты, конкуренцию и стоимости кликов (например, спарсив информацию из SERPSTAT, AHREFS, Wordstat Яндекс и Планировщика ключевых слов).

В этом же файле можно заполнить все поля сразу: синонимы, минус-слова, обязательные и игнорируемые слова.

Затем легко его можно загрузить – нажав на соответствующую кнопку:

Также мы сделали поддержку импорта выгрузок из SERPSTAT, Ahrefs и тех же Планировщика ключевых слов и KeyCollector: при импорте система понимает следующие колонки:

• ключевые фразы;
• частоту;
• стоимость клика;
• конкуренцию.

Готовые результаты сохраняются при импортировании и переносятся в результаты кластеризации.

Рекомендуем для чтения:

1. Семантическое ядро сайта: 9 примеров составления
2. Как провести SEO-аудит регионального сайта за 45 минут

Создаем семантическое ядро

Этот блок будет полезен для SEO-специалиста, который планирует собранную семантику адаптировать для собственного сайта.

Мы научим, как:

• Собрать семантику в понятный файл.
• Найти релевантные страницы для кластеров.
• Подобрать правильно Title для ваших страниц.

Итак, мы уже получили готовую семантику в виде структурированного списка ключевых слов.

Сохраняем результат.

Его можно использовать сразу как есть, но иногда нужно сделать визуально симпатичный Excel файлик.

Собираем семантическое ядро в Excel файл

Учимся делать готовое ядро уже в Excel.

Откроем скачанный файл и скопируем колонки на отдельный лист.

Выберем Данные – Удалить Дубликаты – и отметим нужную колонку.

В результате у нас останутся только группы.

Посчитайте вес каждой группы, просуммировав трафик по каждой из них.

Воспользуйтесь формулой =СУММЕСЛИ()

Затем пересмотрите группы и присвойте каждой из них свою категорию.

Это нужно сделать вдумчиво и при помощи простых фильтров в Excel.

Подставить группу в список ключей можно при помощи формулы =ВПР().

После этого вероятно у Вас останутся слова, скластеризованные не по выбранной категории.

Вы увидите, что в них попали слова из разных категорий.

Не беда.

Выделите те группы, которым не присвоилась категория.

И снова закиньте в наш кластеризатор.

Только теперь по очереди прописывайте Ваши обязательные слова в ячейку СПИСОК ОБЯЗАТЕЛЬНЫХ СЛОВ.

По очереди сделайте так для каждой категории.

Затем воспользуйтесь формулой СЦЕПИТЬ и создайте уникальное название для Вашего нового кластера.

Посчитайте его вес при помощи простой формулы.

Затем поочередно отсортируйте списки сначала по ключевым словам (1), потом по кластерам (2) и затем по категориям (3).

Может оказаться, что на главную у Вас не получилось выделить ключи по причине маленького трафика предполагаемых запросов.

Не беда.

Выберите их вручную и вынесите вверх таблицы.

Воспользуйтесь функцией ПРОМЕЖУТОЧНЫЕ ИТОГИ и разделите визуально кластеры:

Затем внести несколько визуальных изменений и вуаля – семантическое ядро готово в виде читабельного Excel файла!

Его уже можно смело давать на работу копирайтеру и составлять мета.

Ищем релевантную страницу

Если же мы ищем релевантные страницы для кластеров, рекомендуем воспользоваться простой функцией.

На момент написания этой статьи мы внедряем функционал поиска релевантных страниц для нашего кластеризатора.

Сама функция достаточно проста.

Забейте в поисковую строку простой оператор site:ВАШ САЙТ и ключевое слово.

Первая страница, которая будет показана, и является релевантной.

Дальше дело техники – сохранить страничку для кластера и проверять следующий.

Если у нас получился повтор, значит нужно причесать контент, чтобы семантика на разных статьях была более релевантной каждому кластеру.

Пишем грамотно Тайтл для кластера

Для каждого кластера следует грамотно прописать Тайтл.

По поводу того, как нужно писать Тайтл для страниц, можете посмотреть наше видео по технике Эверест.

Составляем Тайтл правильно.

1. Берем наиболее высокочастотную фразу.
2. Ставим ее в начало предложения.
3. Можем поставить точку или двоеточие.
4. Стараемся добавить через запятую 2-3 слова дополнительно – при этом следим за длиной Тайтла. Рекомендуемая длина 55 символов – старайтесь не доходить до 62. CTR у 55 обычно выше.
5. Постарайтесь добавить цифры и скобки.

Помните, что Тайтл – это как подпись на ценнике, где поисковую выдачу воспринимайте как витрину: Вы должны максимально емко попасть в те ключевые слова, которые находятся в Вашем кластере!

ВЫВОДЫ

Кластеризатор ключевых слов – это просто еще один качественный инструмент, который мы создали для экономии времени SEO-специалистов.

Именно экономия времени заставила нас потратить много часов на допиливание и доработку его алгоритмов.

Выводы можно сделать следующие.

1. Кластеризация по выдаче – очень ненадежна и часто дает неверные результаты.
2. Кластеризация – рутинный процесс, поэтому сервисы по кластеризации не должны стоить дорого. Вы можете сегментировать и разбивать по несколько раз один и тот же пул ключей.
3. Кластеризация должна работать быстро. Тот же KeyCollector или Excel могут отнять десятки часов, на что в нашей утилите Вы потратите десяток минут.
4. Кластеризация – тонкий процесс: Вы должны вносить ряд изменений в ее настройку – учитывать синонимы, игнорировать ненужные фразы. Наш кластеризатор имеет обширную базу ключевых слов, которые будут полезны при сборе.
5. Часто кластеризаторы игнорируют фразы, которые нельзя разрывать. Это может привести к задержке сбора ключей на много часов.