1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Улучшение Редактировать базу Keep unique

Тема в разделе "Задачи", создана пользователем Zhenya40, 30 авг 2021.

  1. Zhenya40

    Zhenya40 A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    24 мар 2017
    Сообщения:
    1
    Симпатии:
    2
    Добавить возможность редактировать базу по которой сверяется уник. Через обычный редактор, либо импортировать свою базу обычным списком.

    Практические кейсы применения:

    Когда собираются данные не из одного источника (одних только поисковиков штук 20 можно набрать, из них большая часть есть у вас из коробки), то необходимо отделять дубли. База уника отлично работает, но только если у нас одна копия a-parser на сервере, только один сервер и не было до этого сборов. В промышленных масштабах (а я уверен только в таких и используют а-парсер) копий для одновременной работы на сервере несколько, серверов тоже не один, да и список уника до этого скопившийся всегда имеется. И хочется чтобы каждая задача на каждом а-парсере брала сразу уник, а не набивала дубли между собой, которые по итогу надо будет отделять для каждой копии.
     
    DeLaKroiX и Taylers нравится это.
  2. DeLaKroiX

    DeLaKroiX A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    25 дек 2015
    Сообщения:
    267
    Симпатии:
    96
    поддержу, тоже бывала необходимость допарсить данные и приходилось парсить уже пропаршенные данные.
     

Поделиться этой страницей