Парсер выдачи Яндекса

Перед тем как писать заголовок под запрос, стоит посмотреть, что по нему уже стоит в топе. Парсер берет один запрос, один регион и возвращает таблицу: место, url, title, длина title, description, длина description, h1. Выдача снимается в Яндексе, поисковую систему Google этот инструмент не смотрит.

Тип страницы важнее слов в заголовке

Первое, что читают в такой таблице, это url. Если по запросу стоят десять карточек товара, статья туда не попадет, сколько ее ни переписывай. Если стоят подборки и агрегаторы, значит поиск считает правильным ответом список, а не один товар. Если половина топа это статьи, запрос информационный, и продавать на такой странице не получится.

Вывод из этого делается до написания текста, а не после. Дешевле поменять тип страницы на бумаге, чем через три месяца понять, что она никуда не идет.

Длина title: цифра вместо глазомера

Под таблицей стоит медиана длины title по топу. Медиана, а не среднее: одна страница с заголовком в 200 знаков перекосит среднее так, что ориентироваться на него будет нельзя. Медиана показывает, во сколько знаков укладывается середина топа, и это рабочий ориентир для своего заголовка.

Рядом лежат частые слова заголовков. Если ключевое слово стоит в title у большинства топа, поиск считает его частью ответа на запрос. Это словарь, а не готовая фраза: собрать из слов заголовок и проверить, читается ли он человеком, придется самому. Заголовок, набитый ключами подряд, читается плохо и в сниппете выглядит как спам.

Регион и глубина

По умолчанию стоит Москва. Для московского сайта так и надо, для остальных нет: по коммерческим запросам выдача в разных городах отличается заметно, и заголовки, написанные под московский топ, в своем городе бьют мимо.

Глубина на выбор: первая десятка или двадцать мест. Других настроек у парсера нет, ставить программу на компьютер тоже не надо, все считается в браузере. Десятки хватает, когда надо написать title. Двадцать берут, когда сайт болтается на второй странице и надо понять, чем соседи по одиннадцатому месту отличаются от тех, кто стоит на восьмом.

Почему один запрос и один раз в сутки

Это единственный инструмент раздела, который ходит в поиск, и каждый запуск стоит нам денег. Отсюда лимит: списком парсинг не идет, а без учетной записи доступен один запуск в сутки. Сам запуск занимает около 45 секунд, потому что мало получить топ, надо еще зайти на каждый url и снять оттуда title, description и h1.

С чем это связано в разделе

Обычный порядок такой. После сбора семантики список раскладывается на группы кластеризацией, и в каждой группе выделяется главная фраза. Если фраз мало, список сперва расширяют по базе. Парсинг выдачи запускают по главным фразам самых тяжелых групп, чтобы понять тип страницы и длину заголовка. Дальше по этим данным пишут мета-теги, а текст на странице сверяют с разбором текста.