Кластеризация запросов

Кластеризация отвечает на один вопрос: сколько страниц нужно сайту и какие запросы вести на каждую. Пока список фраз лежит одной простыней, этого не видно, и обычно все кончается одной страницей на сто запросов или сотней страниц по одному запросу на каждой.

Зачем вообще разбивать список

Поисковик показывает по запросу страницу, а не сайт. Если два запроса ведут на одну и ту же страницу, то и текст на ней нужен один. Если на разные, то и страницы должно быть две, иначе они начнут отбирать позиции друг у друга: Яндекс выберет одну сам, и обычно не ту, которую выбрали бы вы. Ошибка тут стоит дорого, потому что переписывать придется обе.

Отсюда правило, по которому и проверяется результат: группа это страница. Не раздел, не тема, не рубрика. Получили 87 групп, значит у вас 87 адресов, и у каждого url свой заголовок и свой текст. Часть страниц на сайте уже есть, и их надо найти, а не писать заново.

Что происходит с фразами внутри

Каждый запрос переводится в числовой вектор: близкие по смыслу фразы получают близкие векторы. Дальше строится граф, где запросы соединены, если они достаточно похожи, и из графа выделяются плотные куски. Такой кусок и есть кластер, он же группа. Главной становится самая тяжелая фраза в нем, та, что стояла выше в присланном списке. Разбор идет автоматически, вручную разводить ничего не надо.

У способа есть граница, и лучше знать о ней заранее. Выдачу он не смотрит. Фразы ремонт стиральных машин и ремонт стиральной машины своими руками написаны почти одинаково, но человек за ними стоит разный: первый ищет мастера, второй ищет инструкцию. Такие пары могут оказаться в одной группе, и разводить их надо до кластеризации, а не после.

Программы для группировки запросов обычно опираются на выдачу: hard требует, чтобы у всех запросов кластера совпали одни и те же сайты в топе, soft ослабляет условие до совпадения с главным запросом. Наш метод другой: он читает смысл и не ходит в поиск, поэтому работает без лимитов на съем топа. Слабые места у этих способов разные, и seo-специалисту про них лучше знать заранее.

Как готовить список перед загрузкой

Три вещи, которые стоит сделать до того, как вставлять фразы в поле.

Убрать мусор. Названия чужих брендов, города, в которых вы не работаете, запросы про вакансии, откровенный хлам вроде опечаток с частотой единица. Любой такой ключ тянет за собой кластер, а кластер означает страницу, которую кто-то потом будет писать.

Развести коммерцию и информацию. Запросы, по которым человек покупает, и запросы, по которым он читает, требуют разных страниц, даже когда слова в них совпадают.

Отсортировать по частотности, по убыванию. Порядок ввода мы используем как вес: тяжелые группы встанут сверху. Если частотность не снята, ничего страшного, просто порядок будет случайным.

Что делать с готовыми группами

Самое частое продолжение: посмотреть, какие страницы под эти группы на сайте уже есть. Для этого рядом стоит привязка запросов к страницам: она берет ваши группы и адреса сайта и говорит, куда какая группа ложится и где адресов не хватает.

Если запросов мало и группы вышли крошечными, список стоит сначала расширить по базе, а потом кластеризовать заново. Если наоборот, количество групп большое и непонятно, с чего начинать, помогает съем выдачи по главным фразам: сразу видно, кто уже стоит в топе и что там за страницы.