Proxy ban time для Net::HTTP

  • Автор темы Автор темы John
  • Дата начала Дата начала

John

A-Parser Enterprise License
A-Parser Enterprise
Некоторые веб-сервисы имеют ограничение на количество запросов с одного IP: xtool, spywords, ahrefs, ашмановский анализатор тематики страницы и т.п. - список можно долго продолжать.

В каком случае Апарсер считает, что прокси надо забанить на proxy ban time?
Можно ли как-то сказать, что если на странице при 200 ответе не срабатывает регулярка Check content - то прокси надо забанить?
 
Сейчас при не соответсвии регекса или кода ответа прокся банится на время Proxy ban time
 
Назад
Верх