Парсинг поисковых систем

Модуль "Парсинг поисковых систем" предназначен для сбора информации с поисковых систем Google и/или Яндекс. Максимальная глубина парсинга - 100 сайтов. Вы можете осуществлять сбор как по одной поисковой системе (к примеру, парсинг гугла), так и по двум сразу. Парсинг доступен только зарегистрированным пользователям.

Информация, собираемая модулем:

  1. Тайтл(выделено зеленным).
  2. Сниппет (выделено синим).
  3. Ссылка на страницу (выделено желтым).
  4. Домен.
  5. Позиция сайта по запросу.
  6. Количество сайтов в выдаче по этому запросу.

Опции модуля

Вам доступна настройка следующих опций:

  • Выбор поисковой системы: Яндекс, Google, обе.

  • Выбор данных для сбора.

Кроме выбранных данных в отчете также будут присутствовать фразы, по которым осуществляется сбор, поисковая система, позиция в выдаче, количество результатов по запросу (фразе).

  • Глубина парсинга. Доступные значения: 10, 50, 100.
  • Удаление дубликатов и настройка удаления дубликатов.

Эти две опции неразрывно связаны между собой. При выборе опции "Удалять в рамках конкретных ключевых фраз" - удаление дубликатов будет происходить только в рамках конкретных фраз, а в итоговом файле у разных фраз останутся дубликаты. Если же Вы выберите опцию "Удалять в рамках всей задачи", то чистка дубликатов будет происходит по всему итоговому файлу.

  • Исключить сайты.

В данное текстовое поле Вы можете вставить до 10 тысяч сайтов, которые Вы хотите исключить из финального отчета. К примеру, сайты компаний, которые есть в Вашей базе.

Обрати внимание, что все сайты приводятся к виду site.ru, к примеру, сайт https://clients.plus будет приведен к виду clients.plus.

  • Выберите домен Google.
  • Выберите домен Yandex.
  • Выберите регион Google.
  • Выберите регион Yandex.
  • Выберите язык поиска Google.
  • Выберите язык поиска Yandex.

Эти опции служат для улучшения результатов регионального сбора, то есть если Вам нужны данные по конкретному региону или языку. По-умолчанию, выставлена РФ и русский язык.

Какие конкретные задачи можно решать с помощью этого модуля?

  1. Сбор баз компаний, вернее их сайтов. Так как немалая часть организаций не публикуется в каталогах компаний, на отраслевых порталах, досках объявлений, то один из способов найти подобные фирмы - их сбор с поисковых систем. Кроме того, если Вы будете использовать поле "исключить сайты", то сможете постоянно обновлять свою базу, собирая из поисковой выдачи только новые организации, которые отсутствуют в Вашей базе компаний.
  2. Сбор сведений о компании/компаниях как своей, так и о конкурентов. К примеру, Вы можете собрать ссылки на отзывы о компаниях, тем самым облегчая себя их дальнейший анализ.
  3. Сбор сайтов для проведения медийной рекламы.
  4. Формирование спиской отраслевых порталов, форумов, профессиональных сообществ.
  5. Проверка наличия на сайтах уже имеющихся в Вашей базе компаний некой информации: представлен ли определенный товар, бренд, услуга, прочее. Это задача решается с помощью специальных операторов гугла и яндекса, к примеру, site. Об этом мы выпустим отдельную статью.
  6. Сбор ссылок на новости, информацию по конкретной теме. Вам не нужно больше вручную копировать каждую ссылку, достаточно загрузить список фраз в инструмента парсинга яндекса и гугла и запустить задачу.
  7. Сегментация имеющегося у Вас списка сайтов по интересующим Вас критериям. Для этого необходимо разбираться и использовать специальные поисковые операторы поисковых систем Google и Yandex.
  8. Сбор сведений о позициях определенных сайтов в выдаче по определенным запросам. Вы можете проверить как свой сайт, так и сайты конкурентов.
  9. Определение уровня конкуренции по нужным Вам поисковым запросам.
  10. И многое другое...

Ссылка на модуль (доступен только после регистрации),