Индексация
Настройте критерии нужных вам ссылок, вы можете проверить ссылки на доступность индексации, по 4 параметрам:
- Nofollow
- Noindex (актуально для поисковой системы Яндекс)
- Meta-теги
- robots.txt
Если вам нужны только ссылки 100% открытые к индексации, вы можете включить «Не сохранять ссылки с запретами в основной отчёт», при этом, программа всё равно разместит ссылки, но они не попадут в основной отчёт, а будут сохранены в отдельном файле. Впоследствии вы можете исключить данные ресурсы из базы.
User Agent
Дополнительно вы можете настроить «User Agent» для браузера, выбрать из списка стандартных или указать свои. Чтобы указать свой UserAgent, кликните на иконку "Шестеренка", при нажатии будет диалоговое окно, где можно указать свои данные.
Тип навигации
Тип навигации отвечает за скорость загрузки страницы, «стандартное ожидание» подразумевает более детальный анализ страницы, большую точность, надёжность и соответственно занимает значительно больше времени, чем «Максимально быстрая загрузка страницы». Опция нацеленная на максимально быстрый результат способна значительно ускорить работу программы, но для эффективного использования, вам нужно быстрое соединение, а так же отсутствие ресурсов, которые медленно отвечают на ваши запросы.
Вы можете выполнить одно выполнение в максимально быстром режиме, а последующие в «стандартном режиме».
Изображения, css, js, flash
Дополнительно вы можете отключить лишнюю информацию в браузере, это:
- Изображения
- CSS
- Flash
- Javascript
Отключение данных параметров способно ускорить выполнение, снизить потребление ресурсов, но и можете ухудшить пробив, в частности некоторые капчи используют css, так же как и отключение картинок может привести к неработоспособности некоторых капч, например, которые идут в виде заднего фона (background).
Выбор браузера
- Default (браузер по умолчанию, который вы можете видеть во всех предыдущих версиях программы).
- Chrome 21 (обновлённая версия браузера «default», включающая в себя исправление ряда ошибок, включая улучшение производительности и повышение стабильности).
- Chrome 61 (67 Beta) (Современная версия браузера, включающая улучшенную поддержку javascript, графическую визуализацию процесса). Выбрав данный тип браузера вы сможете отслеживать процесс выполнения.
Ожидание загрузки страницы
Ожидание загрузки страницы, отвечает за максимальное ожидание ответа от сервера.
Дополнительно вы можете сбросить настройки по умолчанию. Функция будет полезна, если у вас стала некорректно работать программа и вы не знаете в чём дело. Настройки по умолчанию уже нацелены на результаты и являются оптимальными. Единственное, что важно сделать, рассказано в главе 1.
Сохранение настроек
Изменив настройки не забудьте сохранить их.
Если вы сразу планируете запустить выполнение, сохранять настройки не обязательно, они сохраняются автоматически при запуске выполнения.