1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Улучшение [1.1.198] Добавить возможность ограничивать количество потоков на 1 прокси сервер

Тема в разделе "1.1.200", создана пользователем bimbim, 1 фев 2015.

  1. bimbim

    bimbim A-Parser Pro License
    A-Parser Pro

    Регистрация:
    1 фев 2015
    Сообщения:
    3
    Симпатии:
    0
    Здравствуйте, помогите разобраться

    Есть свои 2к прокси, у которых аптайм 100%
    Берем например google pr
    Как настроить так, чтобы прокси не мог использоваться одновременно в нескольких потоках, то есть 1 поток = 1 прокси и не чаще чем 1 раз в сек.

    То есть банальная по-сути задача, но... но например мне интуитивно не понятно как такое реализовать на a-parser-е.

    помогите пожалуйста разобраться, как в заданиях настраивать работу прокси чтобы каждый прокси не вызывался одновременно более 1 раза и не чаще чем n сек

    буду весьма признателен за помощь
     
  2. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    Такой возможности нет, прокси берутся рандомно из общего списка
     
  3. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    перенес в задачи
     
  4. bimbim

    bimbim A-Parser Pro License
    A-Parser Pro

    Регистрация:
    1 фев 2015
    Сообщения:
    3
    Симпатии:
    0
    Благодарствую
    Для тех у кого свой парк подсетей белых Ip, ограничитель\распределитель must have, да и не только.
    Даже "обычным" проксям можно продлить жизнь в некоторых нетривиальных для a-parsera задачах на n повторений.

    Как правило это 2 настройки:
    - максимальное кол потоков на 1 прокси
    - использовать прокси в задание не чаще чем (delay)

    спасибо за внимание.
     
  5. Forbidden

    Forbidden Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    9 мар 2013
    Сообщения:
    3.336
    Симпатии:
    1.791
    добавлен параметр Settings -> Config presets -> Max threads per proxy

    лимит распространяется на задание
     
  6. bimbim

    bimbim A-Parser Pro License
    A-Parser Pro

    Регистрация:
    1 фев 2015
    Сообщения:
    3
    Симпатии:
    0
    Шикарно!. Спасибо
     

Поделиться этой страницей