Непонятная математика по состоянию задачи

  • Автор темы Автор темы sergeda
  • Дата начала Дата начала

sergeda

A-Parser Enterprise License
A-Parser Enterprise
Создал задачу с пятью потоками. Поставил proxy ban time в 0. Через время смотрю состояние:
Active threads: 5
Proxy wait threads: 3
Как это расшифровать и почему так могло случиться?
Парсер - Google
 
Очень просто, живых прокси меньше чем число попыток(Request retries)
 
Очень просто, живых прокси меньше чем число попыток(Request retries)
Тогда я видимо не понимаю как запросы работают. Я думал что Request retries это то, сколько раз делаются попытки спарсить, и если оно превышено то запрос уходит в Failed. А за ban прокси отвечает proxy ban time. Сейчас же в статистике ни один прокси не забанен, то чего я и ожидал но стоит Proxy wait threads. Как можно избежать такой ситуации? У меня один и тот же порт постоянно новый айпи на выходе дает и мне нужно чтоб парсер обращался к ним несмотря ни на что.
 
Назад
Верх