1. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2600+ и мы растем!
    Скрыть объявление

Улучшить работу через прокси

Тема в разделе "Техническая поддержка", создана пользователем sergeda, 17 апр 2018.

Метки:
  1. sergeda

    sergeda A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    22 май 2013
    Сообщения:
    193
    Симпатии:
    23
    Сейчас когда в задаче несколько одинаковых парсеров то они работают с прокси абсолютно независимо и соответственно через одни и те же прокси одновременно шарашат. Из-за этого прокси баняться очень быстро. Предлагаю сделать опциональную галку "Общий пул прокси" в задаче. Чтоб все потоки в задаче использовали один пул и несколько потоков не работало через один прокси одновременно
     
  2. Support

    Support Administrator
    Команда форума A-Parser Enterprise

    Регистрация:
    16 мар 2012
    Сообщения:
    4.547
    Симпатии:
    2.164
    В настройках потоков есть опция Global proxy ban: https://a-parser.com/threads/2356/

    Там же есть опция Max threads per proxy, которая позволяет установить кол-во потоков, в которых одновременно может использоваться один прокси.
     
    sergeda и Forbidden нравится это.

Поделиться этой страницей