Онлайн парсер выдачи

Онлайн парсер выдачи поможет быстро проанализировать и выгрузить топ сайтов по списку ваших запросов в мобильной выдаче и десктоп версии Яндекса и Google. 

В настоящий момент с помощью инструмента можно загрузить в файле тысячи запросов и увидеть пересечения в топ-10, 20 и 50 по запросам на любом языке в определённом регионе, подсветить одинаковые домены, URL, колдунщиков и объявления в контекстной рекламе.

В этой инструкции расскажем, как работать с инструментом.

Кому доступен

Инструмент доступен зарегистрированным пользователям. Без подписки можно сделать до 1 000 проверок выдачи в месяц.

Лимиты

В инструменте расходуются лимиты проверок выдачи. Также есть ограничения на количество записей в отчёте и количество активных проектов.

Лимиты проверок выдачи в месяц:
Без подписки — 1 000 проверок.
На Базовом тарифе — 10 000 проверок.
На Профессиональном тарифе — 100 000 проверок.
На Корпоративном тарифе — 300 000 проверок.

Расход лимитов зависит от глубины проверки. За каждую фразу списывается:

  • ТОП-10 – 1 лимит;
  • ТОП-20 – 2 лимита;
  • ТОП-50 – 5 лимитов;
  • ТОП-100 – 10 лимитов (только для Яндекса).

Например, проверка 100 фраз с глубиной ТОП-20 расходует 200 лимитов. Лимиты списываются одинаково при работе в интерфейсе и через API.

Ограничения на количество записей в отчёте (общие для всех инструментов):
Без подписки — 10 записей.
На Базовом тарифе — 50 000 записей.
На Профессиональном тарифе — 100 000 записей.
На Корпоративном тарифе — Безлимит.

Ограничения на количество активных проектов:
Без подписки — 10.
На Базовом тарифе — 100.
На Профессиональном тарифе — 500.
На Корпоративном тарифе — 1 000.

Посмотреть статистику использованных лимитов можно, нажав кнопку «Лимиты» в правом верхнем углу отчёта.

Отображение использованных лимитов

Важный момент: лимиты инструмента связаны с кластеризатором. Если вы снимаете выдачу в кластеризаторе, то проект отобразится в парсере выдачи.

Где находится

Перейти в инструмент можно из меню. Выберите раздел «Запросы», затем кликните на ссылку «Онлайн парсер выдачи».

Как собрать выдачу

  • Открыв инструмент, нажмите кнопку «+ Создать».
Кнопка создания нового задания
  1. Напишите название задания. Если вы не добавите своё название, автоматически вместо него будет указана дата создания.
  2. По умолчанию будет указана поисковая система Яндекса (десктоп). Вы можете выбрать парсинг: Яндекс (десктоп), Яндекс (мобильный), Google (десктоп), Google (мобильный). 
  3. Введите один интересующий регион для сбора выдачи. Для Яндекса можно выбрать только тот регион, который есть в списке Wordstat. Обратите внимание, что далее регион для этого проекта нельзя будет изменить.
  4. Выберите глубину проверки. Для Яндекса доступны топ‑10, топ‑20, топ‑50 и топ‑100, для Google — топ‑10, топ‑20 и топ‑50. От глубины зависит расход лимитов.
  5. Сбор ИИ-ответов — при создании задания вы можете включить сбор ответов нейросетей по выбранной поисковой системе. Для этого установите соответствующий чекбокс. Если ИИ-ответы не нужны, просто пропустите этот пункт.
    Важно: сбор ИИ-ответов по Google списывает дополнительные лимиты: +1 лимит за каждую фразу. По Яндексу дополнительные лимиты не списываются.
  6. Добавьте список фраз для парсинга. Фразы можно загрузить файлом в форматах TXT или CSV, в котором каждое значение должно быть с новой строки. Уточним, что при вводе фразы могут содержать спецсимволы. В зависимости от тарифа в файле допускается определённое количество фраз. Также можно вписать фразы в поле списком до 10 000 фраз.

Последний шаг создания задания — нажать кнопку «Обработать».

Далее парсер начнёт собирать фразы по списку ваших слов. Пока задание обрабатывается, можно переключиться на другие инструменты и отчёты в сервисе.

Узнать о готовности задания можно в колонке «Статус». Пока сбор данных не завершён, у задания будет отображаться статус «Обновляется».

После сбора всех данных в списке появится задание со статусом «Готово».

Чтобы посмотреть результат парсинга выдачи, кликните на ссылку задания из списка.

Перед вами откроется отчёт со списком выдачи по фразам на дату последнего съёма. В правом верхнем углу отображается «Дата съёма».

Если данные по проекту собирались один раз, в списке будет доступна одна дата. После обновления данных появится новая дата съёма, а предыдущая сохранится в списке. С помощью выбора даты можно посмотреть данные соответствующего съёма.

Визуализация доступна для первых 50 фраз из списка. Данные выдачи по остальным фразам будут доступны в выгрузке CSV.

Какие данные представлены

Для каждого из запросов из вашего списка система отображает колонку, заполненную адресами страниц в выдаче.

Какие данные представлены
Какие данные представлены

Вы можете воспользоваться визуализацией и выделить схожие домены, URL или объявления в зависимости от настроек. Для этого нужно выбрать необходимый пункт в чекбоксе. 

Настройки визуализации

Также можно выбрать те данные, которые будут отображаться в списке выдачи. 

Сервисы поисковой системы — этот чекбокс позволяет включить или исключить отображение определённых доменов и поддоменов поисковых систем и их сервисов в результатах парсинга.

Если установить галочку в чекбоксе, в выдаче будут отображаться поддомены сервисов поисковых систем (например, maps.ya.ru), а основные домены (например, ya.ru, yandex.ru, google.com) будут исключены. Если галочку не ставить, результаты парсинга будут исключать все домены сервисов поисковых систем.

Органика — этот чекбокс позволяет включить отображение доменов из органической выдачи.

Контекст — этот чекбокс позволяет включить отображение доменов из контекстной рекламы.

Колдунщики — этот чекбокс позволяет включить отображение колдунщиков — модулей с ответами на запрос пользователя, расположенные на странице с результатами поиска.

ИИ-ответы — этот чекбокс позволяет включить отображение ИИ-ответов по интересующим запросам. Полный ответ можно посмотреть в режиме сниппетов. Обратите внимание: сбор ИИ-ответов по Google расходует дополнительные лимиты — +1 лимит за каждую фразу. По Яндексу дополнительные лимиты не списываются.

Если ввести фразу в поисковой строке, то в таблице отобразятся данные по тем запросам, которые содержат указанную фразу. 

При наведении курсором на любую ячейку схожие адреса (или домены) во всех столбцах выделяются цветом.

Чтобы увидеть в списке выдачи не только ссылки, но и Title и Description, кликните на иконку в виде таблички в правом верхнем углу от отчёта. 

Отображение Title и Description в результатах выдачи
Отображение Title и Description в результатах выдачи

Ниже основной таблицы представлена таблица «Сайты конкурентов по поисковым фразам». В ней отображаются домены из отчёта и количество фраз, по которым эти домены ранжируются.

Таблица позволяет определить главных конкурентов по группе фраз, а интеграция с другими отчётами (сводка по домену, групповой отчёт, сравнение сайтов, пакетный анализ) помогает быстро провести аналитику.

Важный момент: данные в отчётах (сводка по домену, групповой отчёт, сравнение сайтов, пакетный анализ) отображаются по тем доменам, которые есть в базе Keys.so.

За ней расположена таблица «Страницы конкурентов по поисковым фразам». Здесь собраны URL из отчёта и количество фраз, по которым эти URL ранжируются. Это позволяет найти популярные страницы в выдаче по нужной теме и собрать семантику под конкретную нишу, услугу или товар.. Аналогично доступна интеграция с другими отчётами Keys.so.

GET — параметры — это часть URL-адреса, используемая для передачи данных от клиента (браузера) на сервер.

Таким образом, если вы поставите галочку в чекбоксе напротив «Учитывать GET-параметры», тогда запросы у URL с разными GET параметрами будут считаться раздельно. Если отключить эту опцию, то у URL отсекаются GET параметры, тем самым, при подсчете запросов, два URL с разными GET параметрами объединяются в один.

Приведем пример, когда опция GET-параметра включена:

2 запроса у URL1 = domain.com/page?utm_source=tg.

1 запрос у URL2 = domain.com/page?utm_source=yandex_direct.


Пример, когда опция GET-параметра выключена:

3 запроса = domain.com/page.

Работа с инструментом: копирование и экспорт

Документы (или домены) из ячеек можно копировать. Для этого нужно кликнуть на чекбокс рядом с ячейкой, чтобы появилась галочка.

После этого нажать кнопку «Копировать» в меню справа.

Можно посмотреть список запросов по интересующим страницам. Поставьте галочки рядом со страницами, затем нажмите на кнопку «Запросы страниц» в появившемся меню. Вы перейдёте в инструмент «Список запросов страниц».

У вас есть возможность построить «Групповой отчёт» по выделенным страницам. Чтобы перейти в отчёт, нужно поставить галочки рядом с интересующими страницами. Далее нажать на кнопку «Групповой отчёт» в появившемся меню.

Чтобы выгрузить данные из инструмента в формате CSV, нажмите на значок со стрелочкой в правом верхнем углу от таблицы.

Как включить совместный доступ к проектам?

На Профессиональном и Корпоративном тарифах владелец основного аккаунта и пользователи дочерних аккаунтов могут работать с инструментом совместно.

Общий доступ включается в личном кабинете основного аккаунта. 

При предоставлении доступа можно выбрать уровень прав для дочернего аккаунта: только просмотр или просмотр и редактирование.

Как использовать данные

  • Собирать данные по списку запросов на любом языке в выбранном регионе и смотреть результаты мобильной и десктопной выдачи Яндекса и Google на дату съёма.
  • Увидеть позицию сайта относительно других элементов выдачи — рекламы, колдунщиков и других блоков.
  • Оценить, можно ли использовать запросы из списка на одной странице сайта. Если по всем запросам стоят примерно одни и те же документы, то есть все шансы, что и у вас получится занять место в выдаче по этим запросам одним документом.
  • Скопировать данные для последующей аналитики в других инструментах.
  • Анализировать конкуренцию в ИИ-ответах, благодаря чему находить страницы, которые чаще всего цитируются нейросетями и оценивать видимость бренда и сайтов конкурентов в новой зоне ИИ-поиска.
Оцените материал
Справочный центр Keys.so