Jump to content
Sign in to follow this  

[Старые версии] Описание работы утилиты "Парсер" (Xneopars). Описание для версий Xneolinks 3.6.5 и более ранних.


Administrator

Xneopars - это специальная утилита доступная из главного интерфейса, которая автоматизирует решение задачи по поиску и сбору сайтов. С помощью неё вы сможете находить подходящие вам сайты, например определённой тематики или статейные ресурсы. Работа xneopars повторяет действия человека и автоматизирует работу по поиску в следующих сервисах:

  • Galaxy.com
  • Info.com
  • Websearch.com
  • Seznam.cz
  • Bing.com
  • Lookseek.com
  • Suche.cz
  • Lemoteur.fr
  • Nigma.ru
  • Ask.com
  • Yahoo.com
 
  • Brupt.com
  • Lexisweb.com
  • Mamma.com
  • Infospace.com
  • Hotbot.com
  • icq.com
  • Yandex.ru
  • Google.com
  • Mail.ru
  • Youdao.com
  • 123khoj.com

На данный момент парсер поддерживает 22 различных поисковых системы. Логика работы построена таким образом, что вы можете настроить работу многопоточно, как для отдельно взятой ПС, так и распределить все по отдельным потокам.

Основные моменты

Запустить парсер можно из меню:

1parser.png

После запуска, в меню "Запрос" вы можете указать список запросов, по которым программа будет собирать сайты. Из этого меню вы так же можете запустить выполнение и в любой момент получить временный отчёт. 

5-parser-st.png  

Перейдя в вкладку "Настройки" вы можете указать активные поисковые системы, по которым будет осуществляться поиск. С помощью кнопок "Добавить >>" и "<< Убрать" вы можете управлять и выбирать, какая поисковая система будет активной, а какая нет.

2parser.png

Вы можете указать сразу несколько различных поисковых систем. Если вы укажите всего одну поисковую систему, в этом случае, логика работы выстроиться так, что работа с данной поисковой системой будет осуществляться многопточно, где каждый отдельный запрос будет выполняться в отдельном потоке. Если количество потоков установлено меньше или равное количеству запускаемых поисковых систем, работа каждой поисковой системе будет выполнятся в отдельном потоке, а все запросы будут обработаны поочерёдно.

В настройках вы можете указать прокси и задать задержку между каждым переходом на новую страницу. Задержка указывается в секундах. Прокси работают по алгоритму описанному в статье: 

Но настраиваются прокси для парсера отдельно. Единственное, что является наследуемым - настройки для сервисов OCR (распознавания капч).

Заметка: Парсер доступен только пользователям премиум версии программы. 

Заметка 2: На данный момент парсер часть программы Xneolinks и запускать отдельно парсер и отдельно выполнение прогона нельзя.

 

Sign in to follow this  


User Feedback

Recommended Comments

There are no comments to display.


×
×
  • Create New...