Чёрный список может помочь исключить лишние ресурсы из вашей новой базы, например, если вас не интересуют блоги на одной из web2.0 платформ, где множество ресурсов на поддоменах, например «blogspot».
Вы можете настроить чёрный список, используя два параметра:
- Добавить список стоп слов, по которым будет выполнено удаление, для этого нужно выбрать в списке «Удалять домены по стоп слову».
- Добавить список URL, которые будут удалены из базы, для этого нужно выбрать в списке «Удалять домены по имени».
Удаление ресурсов из базы будет происходить при запуске выполнения.