Долго парсит Direct.Frequency

olegborzov

A-Parser Enterprise License
A-Parser Enterprise
Появились проблемы с парсингом Direct.Frequency
Парсит очень долго - на 20 потоках 5-10 запросов в минуту. Раньше было 250-300 стабильно

Посмотрел по логам дебага - часто вылетает ошибка 429 Too many requests, много ретраев.
upload_2017-8-18_13-52-47.png

Парсинг через прокси Aparser'a из members area, без аккаунтов
upload_2017-8-18_13-53-31.png

С аккаунтами парсить не получается - не удается авторизоваться, т.к. не распознается капча:

upload_2017-8-18_14-3-4.png
 
Последнее редактирование:
Видимо в Яндексе уменьшили кол-во запросов с одного IP в сутки. Как вариант решения - больше попыток (но скорость будет ниже) или попробовать другие прокси.
Парсинг через прокси Aparser'a из members area, без аккаунтов (они все равно не работают - не распознаются капчи при входе).
Насчет каптчи при логине - видимо в связи с новой каптчей что-то поменялось, создана задача: https://a-parser.com/threads/3745/
 
Назад
Верх