1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.
  2. Вступайте в наш Telegram чат: https://t.me/a_parser Нас уже 2200+ и мы растем!
    Скрыть объявление

awmproxy

Тема в разделе "Делимся опытом", создана пользователем worker, 4 июн 2020.

  1. worker

    worker A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    29 июн 2013
    Сообщения:
    21
    Симпатии:
    2
    Вопрос не по а-парсеру, но, думаю, тут есть те, кто использует этот сервис.

    В тарифе разрешено 2к потоков.
    Когда запускаю свой софт в ~300 потоков, то работает сносно. Но когда запускаю даже в 1к потоков, то начинают валиться отлупы в стиле "Connection close by remote side". Такое ощущение, что стоит лимит соединений с одного IP.

    Никто не встречал такую проблему? Поддержка пока молчит.
     
  2. worker

    worker A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    29 июн 2013
    Сообщения:
    21
    Симпатии:
    2
    В общем, написал JS-парсер - аналог моего софта. Основное действие происходит через POST.

    Смотрю логи по заданию - очень много "All retries exceeded". Количество попыток уменьшено с 10(по умолчанию) до 5.
    Можно сделать вывод, что соксы очень слабые в awmproxy + то, что они живые по proxy checker'у не даёт гарантии, что нормально отработают POST запрос.
    А если ставить кол-во попыток в 10, то получается очень медленно работать.
     
    kolya757 нравится это.
  3. malexoid

    malexoid A-Parser Enterprise License
    A-Parser Enterprise

    Регистрация:
    7 сен 2015
    Сообщения:
    248
    Симпатии:
    58
    у меня есть такой сервис, только лимит 4к потоков, постоянно используется 800-1200 потоков, проблем не было.
     

Поделиться этой страницей