Настройки — Парсинг — Google — SERP
В этой панели собраны настройки, относящиеся к работе с поисковой выдачей Google.
Задержки между запросами
Здесь можно указать задержки, выполняемые каждым потоком между запросами к поисковой системе.
Кол-во потоков
Здесь вы можете задать максимальное кол-во потоков при работе с поисковой выдачей. Указывается именно общее кол-во потоков, а не для каждого прокси-сервера.
При этом если вы исследуете всего 2 запроса, но в настройках задано 5 потоков, то будут запущены только 2 потока, т.к. для остальных просто не останется задач для обработки.
Количество результатов на странице
Здесь указывается по сколько результатов на странице поиска вы хотите запрашивать у поисковой системы.
Выбор нестандартного увеличенного кол-ва — это всегда компромисс, т.к. с одной стороны для глубинного исследования выдачи потребуется совершить меньше запросов, но с другой — выдача может отличаться от стандартной, а также могут чаще появляться капчи и проверки робота.
Режим обращений
Программа может выполнять запросы к поисковой выдаче самостоятельно (напрямую или через прокси-серверы) либо через сторонние платные сервисы.
При работе через сторонние сервисы, как правило, сбор выполняется быстрее, без капчи и санкций. Они берут на себя все проблемы взаимодействия с поисковой выдачей, взимая плату за обработку запросов.
-
Обращаться напрямую
В этом режиме программа будет самостоятельно обращаться к поисковой системе (напрямую или через прокси-серверы).
-
XMLRiver
В этом режиме запросы выполняются через сервис XMLRiver.
Для настройки сбора зарегистрируйтесь в сервисе, пополните баланс и укажите в настройках URL для запросов из раздела «Покупка запросов».
На сегодняшний день (24.07.2020) это один из самых удобных и быстрых способов работы с поисковой выдачей Google. -
MegaIndex API
В этом режиме запросы выполняются через сервис MegaIndex API.
Для настройки сбора зарегистрируйтесь в сервисе, пополните баланс и укажите в «Настройках - Парсинг - Платные API - MegaIndex API» параметры доступа.
Обработка запросов может занимать продолжительное время.