socks5 awm (speed)

high_skill

A-Parser Enterprise License
A-Parser Enterprise
добрый день . взял в awmproxy Безлимитный тариф

то есть в описаний тарифа сказано в 4000 потоков :
На обычных безлимитных тарифах количество возможных потоков упирается в 4000-5000 соединений


железо

f3c28ecfdfcc.png


активных потоков из 1500 всего 37

fe3fb38155d4.png


а тут уже 17

9e476fd3f66e.png


и начинает падать в итоге таск заканчивается



0f60cdfa6b18.png


тут retries уменьшил до 2х . запросы почти все уходят в неудачные ! скорость на активных потоках 1К около . я хз много или мало ли это .


сама суть проблемы : не могу выжимать полные потоки и скорости

что то может не так сделано? соксы на авм реально дают 4К потоков ?

спасибо
 
Последнее редактирование:
Кажись, такая хрень с потоками - специфика parse all results. Делай сам подстановки.

Ну а на последнем скрине все в норме, что тебя смущает?
 
активных потоков из 1500 всего 37

а сколько должно быть? :) у тебя запросы заканчиваются

т.е. не был включен Parse all results

тут retries уменьшил до 2х . запросы почти все уходят в неудачные ! скорость на активных потоках 1К около . я хз много или мало ли это .

Тут уже включен Parse all results но зачем то выставлено 2 попытки, это ответ на вопрос почему все запросы в неудачные уходят


1 Гб оперативной памяти это очень мало для работы в 500-1000 потоков, т.к. из этих 1Гб почти 100% заберет ОС Windows
 
1 Гб оперативной памяти это очень мало для работы в 500-1000 потоков, т.к. из этих 1Гб почти 100% заберет ОС Windows
Xeon E3 1220v2 8 GB 2 x1 TB 1Gbit/sec OC Debian - сможет держать 4000 потоков ? или как думаете сколько оптимально будет возможно ставить
 
Xeon E3 1220v2 8 GB 2 x1 TB 1Gbit/sec OC Debian - сможет держать 4000 потоков ? или как думаете сколько оптимально будет возможно ставить
Для парсинга гугла оптимально 1000-2000 потоков
Для других задач можно будет и 4000 потоков использовать, например чек алексы через апи и другие более простые задачи
 
Для парсинга гугла оптимально 1000-2000 потоков
Для других задач можно будет и 4000 потоков использовать, например чек алексы через апи и другие более простые задачи

спасибо большое за развернутые ответы . благодарю за помощь !


извеняйте меня за нубские вопросы :)
 
Назад
Верх