Xneopars - это специальная утилита доступная из главного интерфейса, которая автоматизирует решение задачи по поиску и сбору сайтов. С помощью неё вы сможете находить подходящие вам сайты, например определённой тематики или статейные ресурсы. Работа xneopars повторяет действия человека и автоматизирует работу по поиску в следующих сервисах:
|
|
На данный момент парсер поддерживает 22 различных поисковых системы. Логика работы построена таким образом, что вы можете настроить работу многопоточно, как для отдельно взятой ПС, так и распределить все по отдельным потокам.
Основные моменты
Запустить парсер можно из меню:
После запуска, в меню "Запрос" вы можете указать список запросов, по которым программа будет собирать сайты. Из этого меню вы так же можете запустить выполнение и в любой момент получить временный отчёт.
Перейдя в вкладку "Настройки" вы можете указать активные поисковые системы, по которым будет осуществляться поиск. С помощью кнопок "Добавить >>" и "<< Убрать" вы можете управлять и выбирать, какая поисковая система будет активной, а какая нет.
Вы можете указать сразу несколько различных поисковых систем. Если вы укажите всего одну поисковую систему, в этом случае, логика работы выстроиться так, что работа с данной поисковой системой будет осуществляться многопточно, где каждый отдельный запрос будет выполняться в отдельном потоке. Если количество потоков установлено меньше или равное количеству запускаемых поисковых систем, работа каждой поисковой системе будет выполнятся в отдельном потоке, а все запросы будут обработаны поочерёдно.
В настройках вы можете указать прокси и задать задержку между каждым переходом на новую страницу. Задержка указывается в секундах. Прокси работают по алгоритму описанному в статье:
Но настраиваются прокси для парсера отдельно. Единственное, что является наследуемым - настройки для сервисов OCR (распознавания капч).
Заметка: Парсер доступен только пользователям премиум версии программы.
Заметка 2: На данный момент парсер часть программы Xneolinks и запускать отдельно парсер и отдельно выполнение прогона нельзя.
Recommended Comments
There are no comments to display.