awmproxy

  • Автор темы Автор темы worker
  • Дата начала Дата начала

worker

A-Parser Enterprise License
A-Parser Enterprise
Вопрос не по а-парсеру, но, думаю, тут есть те, кто использует этот сервис.

В тарифе разрешено 2к потоков.
Когда запускаю свой софт в ~300 потоков, то работает сносно. Но когда запускаю даже в 1к потоков, то начинают валиться отлупы в стиле "Connection close by remote side". Такое ощущение, что стоит лимит соединений с одного IP.

Никто не встречал такую проблему? Поддержка пока молчит.
 
В общем, написал JS-парсер - аналог моего софта. Основное действие происходит через POST.

Смотрю логи по заданию - очень много "All retries exceeded". Количество попыток уменьшено с 10(по умолчанию) до 5.
Можно сделать вывод, что соксы очень слабые в awmproxy + то, что они живые по proxy checker'у не даёт гарантии, что нормально отработают POST запрос.
А если ставить кол-во попыток в 10, то получается очень медленно работать.
 
у меня есть такой сервис, только лимит 4к потоков, постоянно используется 800-1200 потоков, проблем не было.
 
Назад
Верх