1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление
Файлы cookie Telegram чат

Выбор: CPU ядер(обработка заданий) / (обработка результатов)

Тема в разделе "Техническая поддержка", создана пользователем Gorn, 30 май 2022.

Метки:
  1. Gorn

    Gorn A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    6 июл 2017
    Сообщения:
    87
    Симпатии:
    18
    В новой версии А-парсера появились настройки:
    CPU ядер(обработка заданий) и
    CPU ядер(обработка результатов)

    Вопросы:
    1) Это настройки для КАЖДОГО задания или целиком на весь А-парсер?
    2) Сколько ядер выбрать для компа на I7 - 4 ядра\8 потоков?
    3) Я большее количество данных получаю регулярками в задании и совсем немного - в конструкторе результатов. Может это сейчас не оптимально и лучше большую част делать в конструкторе результатов, чтобы освободить ядра для работы с потоками (закачка страниц), и максимально нагрузить ядра обработки результатов? Есть какая-то золотая середина? В конструкторе результатов я использую до 30 полей.
    В среднем задании обрабатывается до 1 млн УРЛ, поэтому экономия времени очень важна.
     
    #1 Gorn, 30 май 2022
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.377
    Симпатии:
    2.107
    Детальная информация о поддержке нескольких ядер есть здесь: https://a-parser.com/threads/4417/#post-23309

    Скорее всего не имеет значения на каком этапе применять регулярки, исходите из нужной вам логики задания.
     
    #2 Support, 30 май 2022
(Вы должны войти или зарегистрироваться, чтобы разместить сообщение.)

Поделиться этой страницей