Поисковая выдача

Программа поддерживает сбор данных поисковой выдачи, похожих поисковых запросов, поисковых подсказок, рекламных объявлений, встроенных помощников и другой информации из популярных поисковых систем (некоторые поисковые системы поддерживают ограниченный функционал).

Сбор данных поисковой выдачи

В терминологии Key Collector под данными поисковой выдачи (данные SERP) подразумеваются именно заголовки и адреса страниц, сниппеты, а также вычисляемые метрики: кол-во найденных документов по запросу, кол-во главных страниц, кол-во заголовков, содержащий запрос.

Кнопка сбора данных SERP

Нажмите на кнопку меню «Поисковая выдача» и выберите нужную поисковую систему.

В зависимости от поисковой системы внешний вид окна запуска сбора может немного отличаться, но их объединяют некоторые общие настройки и принципы работы.

Настройки

Глубина исследования поисковой выдачи

Программа может просматривать одну или несколько страниц поисковой выдачи по запросу. Изменить глубину можно на панели настроек.

Чем глубже исследуется выдача — тем больше необходимо выполнить запросов к поисковой системе. Каждый запрос занимает время на обработку, на технологическое ожидание между запросами, а также увеличивает риски применения санкций (капчи и банов).

Старайтесь снимать данные поисковой выдачи ровно той глубины, которая требуется для решения ваших задач. Не устанавливайте заведомо большие значения, чтобы не тратить лишнее время и ресурсы на сбор статистики.

Вы можете установить достаточно большую глубину сбора, если планируете выполнять анализ позиций разных сайтов по собранным данным поисковой выдачи.

Если вы настроили сбор данных через какой-нибудь сервис (Yandex.XML, XMLRiver, XMLProxy и др.), то в некоторых случаях можно увеличить глубину сбора без увеличения временных издержек и дополнительных затрат. Подробные условия обязательно следует уточнять в самих сервисах.

Зачастую сервисы, имитирующие работу Yandex.XML, выдают до 100 результатов за 1 запрос. Поэтому получение ТОП 10 или ТОП 100 результатов занимает равное время и может стоить одинаково. Подробные условия обязательно следует уточнять в самих сервисах. Мы не отвечаем за работу и условия сторонних сервисов, а лишь делимся некоторыми нюансами.

Маска запроса

При формировании запроса к поисковой системе программа может модифицировать запрос согласно указанной маске. Например, к запросам можно добавить оператор поиска по какому-нибудь сайту, минус-слова или другие операторы поиска.

На примере различных масок покажем преобразование фразы "цветная капуста" (без кавычек) в новые запросы.

Исходный запрос Цель Маска Результат
цветная капуста фразовая выдача "{QUERY}" "цветная капуста"
цветная капуста точная фразовая выдача "{!QUERY}" "!цветная !капуста"
цветная капуста минусация выдачи {QUERY} -рецепт цветная капуста -рецепт
цветная капуста фразовый поиск по сайту "{QUERY}" (site:cabbage.com) "цветная капуста" (site:cabbage.com)

Текст запроса подставляется вместо макроса {QUERY}, который в обязательном порядке должен использоваться в маске.

Для получения "фразовой выдачи" по запросу в кавычках можно задать маску "{QUERY}", которая будет добавлять двойные кавычки вокруг текста исследуемых фраз.

Для получения "!точной !фразовой !выдачи" по запросу можно задать маску "{!QUERY}", которая будет добавлять двойные кавычки вокруг текста исследуемых фраз и оператор фиксации словоформы ! перед каждым словом фразы.

Для минусации выдачи введите список минус-слов после {QUERY}: {QUERY} -рецепт -бесплатно. Такая маска будет добавлять указанные минус-слова после текста исследуемой фразы.

Вы можете составлять любые другие маски, комбинируя предложенные подходы.

Обновление данных из кэша (по ранее полученным данным)

При сборе данных поисковой выдачи вычисляются метрики (кол-во главных страниц и кол-во заголовков, содержащих искомый запрос) с учетом заданных в «Настройках - Парсинг - SERP» параметров.

Если вы изменили параметры, и хотите пересчитать метрики, вы можете воспользоваться опцией «Запустить сбор в режиме обновления данных из кэша» на панели настроек и запустить сбор: программа выполнит расчеты, не совершая запросы к поисковой системе, на основании уже записанных в проект данных поисковой выдачи.

Не забудьте выключить опцию после обновления метрик, чтобы в будущем статистика снова начала сниматься из Интернета.

Панель дополнительной статистики SERP

Для просмотра расширенной статистики активируйте вкладку данных SERP (1) и выберите фразу в таблице (2).

Панель доп. статистики SERP

Если панель скрыта, нажмите кнопку "Доп. статистика поисковой выдачи" в меню "Дополнительные панели" на вкладке "Вид".

Слишком большое кол-во открытых вкладок дополнительной статистики может привести к замедлению работы интерфейса программы. Рекомендуем закрывать ненужные вкладки и открывать их при необходимости.

В левой части панели отображаются общие сведения по выделенной фразе.

В правой части отображается таблица поисковой выдачи с адресами и заголовками страниц, а также их выдачей. Вы можете настроить более компактный вид таблицы, выключив в левой части отображение заголовков или сниппетов.

При нажатии на кнопку слева от URL страницы программа выполнит поиск фраз в проекте, выдача по которым тоже содержит этот URL.

Сравнение поисковой выдачи

Для сравнения поисковой выдачи по нескольким запросам нажмите кнопку «Сравнить выдачу» и выделите несколько фраз в таблице.

Программа сравнит выдачу по запросам (она должна быть собрана до выполнения анализа) на уровне адресов страниц или доменов, найдет пересечения и отобразит их в компактном или полном представлении.

Совпадения будут иметь одинаковый фон, при этом можно нажать на свободное место в ячейке и увидеть подсветку найденных элементов.

В процессе анализа подсчитываются метрики похожести выделенных фраз на уровне URL и доменов. Также отображаются наиболее популярные URL и домены с указанием кол-ва найденных совпадений.

Просмотр истории изменений поисковой выдачи

При помощи этого инструмента вы можете увидеть изменения в поисковой выдаче относительно предыдущих сборов.

Для работы инструмента требуется, чтобы для фразы несколько раз были получены данные поисковой выдачи, и в панели настроек была включена опция записи истории в проект.

Хранение истории поисковой выдачи занимает место в проекте. Рекомендуем не использовать опцию, если вы никогда не планируете отслеживать изменения в поисковой выдаче.

Выделите запрос в таблице и нажмите кнопку «Показать изменения». В открывшейся панели «История SERP» при наличии истории в проекте программа отобразит структуру изменений выдачи: какие страницы пропали из выдачи, какие — вошли, какие изменили позицию или остались без изменений.

При наведении на URL программа проверит и отобразит изменения в заголовке и сниппете, если они будут обнаружены.

Выгрузка данных поисковой выдачи

Выгрузка данных SERP выполняется через пункт в главном меню программы.

Здесь можно задать некоторые параметры выгрузки. Основные настройки форматирования документа находятся в «Настройках - Экспорт».

Выгружаются фразы со статистикой из основной таблицы и данные SERP. Если не нужны колонки основной статистики, вы можете временно скрыть их или внести в исключения в настройках.

Для нужд автоматизированной обработки данных SERP рекомендуем выгружать данные напрямую из проекта, а не из файла выгрузки. Этот вариант будет работать быстрее и удобнее для программиста.