Медленно собирается вордстат с прокси a-poster

  • Автор темы Автор темы benone
  • Дата начала Дата начала

benone

A-Parser Enterprise License
A-Parser Enterprise
Скорость сбора - 13/14
h_1436050913_6235410_7f1d7dc6cf.jpg

Конфиг: https://gist.github.com/benone/2da3e871215bac172e72
 
По скрину выше видно, что на один запрос уходит почти 20 попыток. Отсюда и маленькая скорость. А причиной этому скорее всего является то, что Яндекс очень часто выдает каптчу.
 
А как тогда быть? Надо включать капчу?
 
В данном парсере на данный момент не предусмотрено использование Антигейта. Пока единственный вариант - эксперементировать с прокси: подбирать другие, на которых каптча не так часто будет выдаваться.
 
Назад
Верх