Yandex.Wordstat

Программа поддерживает работу с сервисом Yandex.Wordstat.

Пакетный сбор фраз

Пакетный сбор позволяет собрать новые фразы по списку запросов.

Сбор выполняется из левой или правой колонок результатов. В процессе сбора в таблицу записываются фразы вместе с базовой частотой.

Дополнительные виды частот снимаются отдельно.

В зависимости от популярности запроса сервис выдает до 40 страниц выдачи по 50 результатов (суммарно до 2000 запросов). В редких случаях выдается до 45 страниц.

Инструмент поддерживает стандартные функции окна пакетного сбора фраз.

Выдача по запросу не всегда содержит исходный запрос. Включите опцию принудительного добавления запросов, если хотите добавлять в выдачу исходный запрос.

Параметры сбора

  • База данных

    Вы можете указать предпочтительный тип базы данных, по которой сервис выдает статистику.

    Как правило, рекомендуется собирать фразы без ограничений по типу устройств.

  • Регион

    Вы можете задать таргетинг.

    Как правило, для максимального охвата выдачи рекомендуется не использовать настройки региональности. Выбор региона может потребоваться при оценке нишевого спроса в каком-либо регионе.

    Инструмент поддерживает функцию автоматического назначения региона для одноименных с названиями регионов групп.

  • Режим сбора

    Вы можете выбрать источник данных: левую, правую или обе колонки

  • Интегрировать минус-слова в запросы

    Программа может автоматически присоединять к исследуемым запросам минус-слова из выбранного списка.

    Использование минус-слов позволяет сократить объем выдачи, сделать ее более точной. При исследовании высокочастотных запросов, выдача которых целиком не помещается в лимит 40 страниц выдачи, минус-слова могут помочь собрать дополнительные результаты, т.к. за счет выброса ненужных фраз появится место для эффективных.

    Сервис предъявляет набор требований к минус-словам по их длине, кол-ву, отсутствие недопустимых символов и т.д. Программа не выполняет предварительную проверку минус-слов, поэтому следите за валидностью списка минус-слов самостоятельно.
    Если выдачи по запросу не оказалось, возможно, проблема в минус-словах, которые полностью отсекают все результаты. Проверьте запрос в браузере вручную, чтобы убедиться, что по нему есть непустой результат.
  • Добавлять "+" оператор к словам

    Сервис может игнорировать предлоги, союзы и другие несущественные по его мнению слова при формировании выдачи по запросу.

    Иногда наличие предлога принципиально важно в контексте составления семантического ядра.

    Например, при подготовке ядра по информационному сайту в раздел справки важно наличие предлога «как»: «как установить программу»,«как обработать запросы» и т.д.

    Для того чтобы сервис принудительно учитывал какое-либо из слов в запросе, его необходимо зафиксировать оператором +:

    • +как установить программу
    • +как обработать запросы
    • +как +сделать пиццу

    Не всегда имеется возможность вручную расставлять оператор + перед часто употребимыми предлогами и словами.

    Рассматриваемая опция позволяет автоматически добавлять оператор + перед словами из указанного пользователем списка перед отправкой их в сервис.

    Другими словами, вы задаете запрос «как установить», а программа отправляет на исследование запрос «+как установить», добавляя оператор + автоматически, если «как» присутствует в списке слов для модификации.

Настройки

  • Добавлять в таблицу фразы с частотами от ... до ...

    Данное ограничение позволяет отсечь на этапе сбора фразы с заведомого ненужными в ваших задачах частотами.

    В теории опция может сэкономить время обработки запросов, если верхний предел будет ограничивать проход по дополнительным страницам выдачи.

    Если не использовать опцию, то всегда можно воспользоваться встроенными фильтрами уже после завершения сбора фраз.

    Мы не рекомендуем ограничивать выдачу по частотам (особенно по нижней границе), т.к. это может привести к случайному игнорированию хороших запросов.
  • Записывать {доп. значение} для добавляемых фраз и их расширений

    В процессе сбора фраз вы можете использовать разные или общие целевые группы для добавления результатов.

    Программа позволяет указать произвольное дополнительное значение, которое будет добавляться в указанную текстовую колонку для всех результатов, относящихся к тому или иному запросу.

    Например, в качестве доп. значения можно указать сам исходный запрос или страницу сайта. В дальнейшем по этому значению можно выполнить поиск, сортировку и фильтрацию, определять, откуда пришел запрос и т.п.

    • газовая сварка {газовая сварка}
    • рецепт соленых огурцов {https://ru.wikipedia.org/wiki/Солёные_огурцы}
    Не забывайте заключить доп. значение в фигурные скобки { }

    Если вы хотите вводить запросы, содержащие двоеточие, то для корректной работы режима автоматического распределения по группам добавьте двойные кавычки вокруг значений, чтобы символ двоеточия не воспринимался как разделитель пары группа:ключ:

    • "газовая сварка {http://site.com}"
    • "рецепт соленых огурцов {https://ru.wikipedia.org/wiki/Солёные_огурцы}"

Сбор частот

Сбор частот позволяет оценить популярность запросов.

Сервис выдает кол-во показов запроса за последние 30 дней.

Статистика обновляется не ежедневно, поэтому не воспринимайте этот период буквально.

Сервис поддерживает различные операторы поиска, поэтому программа способна получать несколько видов частот.

Программа автоматически добавляет нужные операторы при сборе того или иного вида частот (добавлять операторы вручную к текст запросов не требуется).

Базовая частота

Базовая частота соответствует широкому типу вхождения слов. Для выполнения запроса достаточно отправить сам запрос в исходном виде:

  • свежий хлеб
  • условная вероятность
  • теорема Байеса

В результатах могут быть учтены и другие фразы, косвенно относящиеся к запросу "свежий хлеб" в широком соответствии: купить свежий хлеб, свежий ржаной хлеб, рецепт хлеба, свежая выпечка и др.

Фразовая частота

Фразовая частота фиксирует состав слов в искомом запросе, и показы считаются для словосочетания целиком. Для выполнения запроса необходимо добавить двойные кавычки:

  • "свежий хлеб"
  • "теорема Байеса"
  • "плотность распределения"

В результатах к запросу "свежий хлеб" будут учтены только фразы с тем же набором слов:: свежий хлеб, хлеба свежего и др.

Точная фразовая частота

Точная фразовая частота фиксирует не только состав, но и словоформы слов в искомом запросе. Для выполнения запроса необходимо добавить оператор ! перед каждым словом в запросе и взять его в двойные кавычки:

  • "!свежий !хлеб"
  • "!теорема !Байеса"
  • "!плотность !распределения"

В результатах к запросу "!свежий хлеб!" будут учтены только фразы с тем же набором слов в той же словоформе: свежий хлеб, хлеб свежий (порядок не фиксируется).

Точная фразовая частота с порядком

Точная фразовая с порядком частота фиксирует состав, словоформы и порядок следования слов в искомом запросе. Для выполнения запроса необходимо добавить оператор ! перед каждым словом в запросе, взять его в и двойные кавычки:

  • "!свежий !хлеб"
  • "!теорема !Байеса"
  • "!плотность !распределения"

В результатах к запросу "!свежий хлеб!" будут учтены только фразы с тем же набором слов в той же словоформе и том же порядке следования: свежий хлеб.

Частота по маске

Вы можете самостоятельно определить маску запроса, используя поддерживаемые сервисом операторы.

Маска запроса должна содержать фрагмент QUERY, который при сборе частот будет заменяться на текст исследуемого запроса.

Например, маска !QUERY трансформирует запрос, добавляя к словам оператор !, а маска "!QUERY" добавляет оператор !, оператор и кавычки (что соответствует точной фразовой частоте с порядком).

Параметры сбора

Параметры сбора идентичны параметрам пакетного сбора фраз.

Настройки

 
  • Не снимать частоты для фраз с базовой равной или ниже, чем

    Иногда можно сократить время сбора уточняющих видов частот, если заведомо известна их нижняя желаемая граница.

    Так как уточняющие виды частот для одного и того же запроса по определению всегда меньше либо равны базовой частоты, а базовая частота часто выдается бонусом при пакетном сборе фраз, можно автоматически пропустить некоторые запросы, если их базовая частота меньше некоторого порога (и уточняющие виды частоты тоже будут меньше этого порога).

  • Автоматически записывать 0 в колонки частот " " и "!", если базовая частота равна 0

    Так как уточняющие виды частот всегда меньше либо равны базовой частоте, то можно сделать вывод о том, что если фраза имеет нулевую базовую частоту, то и уточняющие частоты этой фразы будут нулевыми (т.е. сбор выполнять не требуется, и можно заочно проставить 0 в ячейки частот).

  • Маска запросов пользовательского формата

    Здесь вы можете определить маску запросов для сбора уточняющих видов частот.

  • При сборе точных видов частот пытаться преобразовать фразы в валидные

    Сервис накладывает определенные ограничения по использованию операторов поиска. Например, нельзя совместно использовать минус-слова внутри фразового оператора " ".

    Использование этой опции позволяет программе автоматически пытаться преобразовать запрос в валидный перед отправкой его в сервис:
    • удаляются минус-слова
    • перед оператором + не добавляется оператор !
    • перед оператором ! не добавляется дублирующий оператор !
    Обработка происходит "за кулисами", неявно для пользователя. Несмотря на удаление минус-слов, например, частота для скорректированного запроса будет записана в ячейку фразы, которая эти минус-слова содержит.
  • Сохранять историю частот

    Программа может опционально хранить в проекте историю изменений частот, с которой можно в дальнейшем ознакомиться на вкладке дополнительной статистики: посмотреть ее в табличном виде и отобразить на графике.

Сбор истории частот

Сбор истории частот позволяет оценить популярность запросов в интервале времени.

Сервис выдает историю запросов за период до 2 лет с группировкой по неделям или месяцам. Поддерживается статистика только по базовой частоте (получить историю по уточняющим видам частот нельзя).

При сборе данных программа делает предсказания относительно сезонности запросов, вычисляя пиковые значения частот и проверяя, повторяются ли они год к году. Также вычисляются медиана и среднее арифметическое за период.

Например, запрос «новогодние украшения» имеет ярко выраженный всплеск популярности зимой.

Расширенную статистику в деталях можно посмотреть на вкладке дополнительной статистики.

Параметры сбора

Параметры сбора идентичны параметрам пакетного сбора фраз.

Настройки

  • При сборе "по месяцам" рассматривать период

    В процессе сбора статистики вычисляются медиана и среднее арифметическое значений.

    В этой опции вы можете ограничить период, за который будут рассматриваться значения при вычислении этих метрик в процессе сбора истории показов в режиме группировки по месяцам.

    Эта настройка не влияет на процесс определения критерия сезонности: признак прогнозируется по данным за весь период.
  • При сборе "по неделям" рассматривать период

    В процессе сбора статистики вычисляются медиана и среднее арифметическое значений.

    В этой опции вы можете ограничить период, за который будут рассматриваться значения при вычислении этих метрик в процессе сбора истории показов в режиме группировки по неделям.

    Эта настройка не влияет на процесс определения критерия сезонности: признак прогнозируется по данным за весь период.
  • Дополнять историю

    Сервис выдает статистику за период до 2 лет (в режиме группировки по месяцам).

    При сборе статистики программа очищает прежние данные по частотам за период и записывает актуальные.

    Если включить эту опцию, программа будет дополнять ранее собранные данные истории частот вновь полученными данными.

Вкладка дополнительной статистики

Для просмотра расширенной статистики активируйте вкладку дополнительной статистики Yandex.Wordstat (1) и выберите фразу в таблице (2).

Панель содержит график истории показов, табличное представление данных с возможностью копирования в буфер обмена. Здесь также можно переключиться между источниками данных (3), отобразив собственноручно собранную историю частот из проекта.

Если панель скрыта, вы можете вернуть ее на вкладке инструментов «Вид - Дополнительные панели».

Слишком большое кол-во открытых вкладок дополнительной статистики может привести к замедлению работы интерфейса программы. Рекомендуем закрывать ненужные вкладки и открывать их при необходимости.

Почему из левой колонки собирается только 2000 фраз? Я задаю популярный запрос!

Дело в том, что сервис выдает максимум до 40 страниц выдачи по 50 результатов. 40 * 50 = 2000 фраз. Иногда сервис позволяет заглянуть на 41 или даже 42 страницу, но это скорее исключение.

Даже при исследовании популярных запросов вы не сможете получить все запросы разом. Например, по запросу "купить" нельзя скачать все коммерческие запросы по всем тематикам мира. Для этого придется уточнить исследуемый запрос.

Если вы не можете самостоятельно придумать уточняющие запросы, и вам неоткуда их взять, вы можете использовать результаты выдачи по более широкому запросу в качестве входных запросов для следующего углубленного исследования.

Программа может автоматически выполнить такой анализ, если задать ненулевую глубину запроса в панели настроек окна пакетного сбора фраз.

Будьте осторожны при использовании этой функции, т.к. уже на глубине 1 дополнительно пройтись по 2000 фразам, полученным на нулевой итерации, займет крайне много времени!

Вместо автоматического глубинного исследования для популярных запросов мы рекомендуем просмотреть список полученных фраз на нулевой итерации, сразу удалить лишние запросы, потом скопировать в буфер обмена оставшиеся (через контекстное меню к заголовку колонки "Фраза") и вставить их в окно пакетного анализа.

При таком подходе вы не только сократите время обработки запросов, получите меньше мусора, но и получите полный контроль на процессом: статистику выполнения, возможность приостановки и возобновления парсинга.

Почему не собираются фразы вплоть до частоты 0?

Часто пользователи ожидают, что по некоторому запросу Wordstat всегда выдает полный список запросов в порядке убывания кол-ва показов вплоть до 0. Однако, сервис может не иметь полной выдачи: фразы могут закончиться на любой частоте.

Например, при исследовании ВЧ запросов выдача часто ограничена кол-вом страниц (40 страниц — базовое техническое ограничение самого сервиса), а при исследовании СЧ и НЧ запросов выдача может оборваться в любой момент, не доходя до фраз с частотой 0.

Другими словами, сервис не гарантирует, что исследуемому запросу с частотой 20 000 будет, например, 15 страниц выдачи, где на последней странице фразы будут иметь частоту 1 или 0. Напротив, фразы могут закончиться на любой странице, и последняя фраза в отчете может иметь базовую частоту 2400 или любую другую.

Убедиться в этом можно, выполнив проверочный запрос вручную через браузер и пролистав выдачу до последней страницы.

Почему не добавляются запросы, хотя в журнале событий нет ошибок?

Возможно, по исследуемому запросу просто нет выдачи. Или неверно используются минус-слова.

Рекомендуем ознакомиться со списком причин отсутствия результатов при парсинге и добавлении запросов.

Какие существуют ограничения по минус-словам?

Программа не накладывает ограничения на минус-слова. Но их накладывает сам сервис.

Например, нельзя совершать слишком длинные запросы, использовать слишком большой список минус-слов, использовать составные фразы в минус-словах, некорректно использовать операторы поиска и некоторые спец. символы.

Мы не можем перечислить все правила составления минус-слов, т.к. они формируются на стороне самого сервиса. Если он выдает ошибку при анализе запроса, то проверьте корректность списка минус-слов, устраните все найденные ошибки.

Для диагностики скопируйте результирующий запрос с минус-словами из журнала событий в окне программы и вставьте его вручную через браузер.

Рекомендуем не использовать слишком длинные списки минус-слов. Также нет смысла добавить одни и те же слова в разных склонениях, если вы используете широкую минусацию (сервис самостоятельно учтет словоформы).